您的位置:首页>生活日常>正文

"本源悟空"全球首次运行十亿参数级AI大模型微调任务

生活日常时间:2025-04-13 21:16阅读:2

量子计算助力大模型轻量化:全球首次“真机实战”

引言

近期,一项由本源量子计算科技(合肥)股份有限公司与合肥综合性国家科学中心人工智能研究院等机构联合开展的研究取得突破性进展。在国产超导量子计算机“本源悟空”上,成功实现了十亿参数级AI大模型的微调任务,这是全球范围内首次在真实量子计算设备上完成此类任务。

核心成果

实验表明,在大幅减少参数量(76%)的情况下,训练效果反而提升了8.4%。这一结果不仅验证了量子计算在实现大模型轻量化方面的潜力,也为解决当前大模型面临的算力瓶颈提供了全新的思路。

技术原理

微调技术是指基于通用大模型,通过引入特定领域的数据进行进一步训练,以适应如医疗诊断、金融风控等专业应用场景。量子计算凭借其独特的叠加态和纠缠态特性,能够同时探索大量参数组合,从而显著提高大模型微调的效率。

创新方法

研究团队提出了“量子加权张量混合参数微调”的创新方法。该方法通过将模型权重转化为量子神经网络与张量网络的混合架构,利用量子神经网络提取高维非线性特征,而张量网络则负责压缩参数规模。这种设计犹如为传统模型安装了“量子引擎”,实现了经典与量子计算的协同优化。

实验验证

实验数据显示,优化后的模型在心理咨询对话数据集(CPsyCountD)上的训练损失降低了15%,而在数学推理任务(R1-Distill-SFT)中的严格准确率从68%提升至82%。这些结果充分证明了现有量子硬件已具备初步支撑大模型微调的能力。

设备背景

“本源悟空”作为我国目前最先进的可编程超导量子计算机,不仅在国内处于领先地位,还为全球139个国家超过2300万人次提供了量子算力云服务,并完成了35万个量子运算任务,展现了强大的实际应用价值和技术实力。

结语

此次研究成果标志着量子计算在大模型领域的首次“真机实战”,为未来量子计算与人工智能的深度融合奠定了坚实基础,同时也展示了我国在量子科技领域的前沿探索能力和自主创新水平。

本页地址:https://www.yangtata.com/view/6370.html