arXiv NLP·10 天前★ 2

AQL-Lite 框架发布:低成本持续预训练提升阿拉伯语大模型

原文标题:AQL-Lite: Enabling Efficient Knowledge Acquisition for Arabic LLMs via Data-Centric Continual Pretraining

重要度 2/5 · AI 综合评估报道影响力与新鲜度,4–5 分为高价值资讯。

AI 智能摘要

研究者提出 AQL-Lite 框架,通过高质量数据筛选与部分参数持续预训练,将多语言适配到现代标准阿拉伯语。在 5B 对比中,该方法以 52% 的实际耗时达到全参数持续预训练 94% 的增益。扩展至 40B 后,12B 模型在 Open Arabic Leaderboard v2 上得分 75.3。

阅读原文 +0
AI 处理过程展开/收起
原始标题:AQL-Lite: Enabling Efficient Knowledge Acquisition for Arabic LLMs via Data-Centric Continual Pretraining
AI 中文标题:AQL-Lite 框架发布:低成本持续预训练提升阿拉伯语大模型
来源:arXiv NLP · 发布于 10 天前
分类:大模型 · AI 重要度:★ 2(2)
标签:阿拉伯语 / 持续预训练 / LoRA / 数据筛选 / 多语言模型
关键词:阿拉伯语大模型 / 持续预训练 / AQL-Lite / LoRA 微调 / 多语言模型
AI 处理:2026/10/23 12:01:42 · 模型 deepseek-chat · 规则版本 2026-10-21.1
AI 生成以上内容由 AI 自动生成:中文标题、摘要、分类与重要度;同一事件的多家报道会自动归并展示。 内容仅供参考,可能存在偏差,请以原文为准, 不构成任何投资或专业建议。
版权归原作者与原发布平台所有;若涉及侵权或信息错误,请在举报与侵权投诉页反馈,我们会及时处理。
每天 09:30,3 条 AI 圈真正重要的变化,免费订阅 →
AQL-Lite 框架发布:低成本持续预训练提升阿拉伯语大模型 - 智讯 AI News