华为开源盘古大模型:70 亿 + 720 亿参数架构开放

253次阅读
【华为开源盘古大模型核心信息速览】
华为技术有限公司于 6 月 30 日官宣重大开源动作,正式开放盘古 70 亿参数稠密模型、盘古 Pro MoE 720 亿参数混合专家模型,同步开源基于昇腾芯片的模型推理技术。据官方公告,盘古 Pro MoE 72B 模型权重、基础推理代码及昇腾架构下的超大规模 MoE 推理代码已率先上线开源平台,盘古 7B 模型权重与推理代码也将于近期完成开源部署。

华为开源盘古大模型:70 亿 + 720 亿参数架构开放

开源矩阵解析:技术架构与生态价值双重释放
  • 模型规模与技术特性
    • 盘古 7B 稠密模型:聚焦通用场景高效落地,70 亿参数架构平衡性能与算力成本,适合企业级应用快速集成。
    • 盘古 Pro MoE 72B 混合专家模型:采用 “稀疏激活 + 多专家并行” 架构,在保持千亿级模型能力的同时大幅降低计算开销,典型场景下推理效率提升 3 倍以上。
  • 昇腾推理技术开源:开放基于昇腾芯片的分布式训练框架、内存优化算法及算子融合技术,助力开发者实现大模型在昇腾平台的高效部署。
华为生态战略再进阶:推动 AI 千行百业落地
此次开源被视为华为昇腾生态战略的关键节点 —— 通过开放核心模型能力与底层硬件适配技术,一方面降低大模型研发与应用门槛,推动学术研究与产业创新协同发展;另一方面强化昇腾芯片在 AI 基础设施领域的技术壁垒,加速 AI 技术向金融、制造、医疗等行业渗透,实现 “技术开源 - 生态繁荣 - 价值创造” 的闭环。
开发者接入指引与开源平台入口
目前,盘古 Pro MoE 72B 相关资源已在华为开源平台上线,开发者可获取模型权重、推理代码及昇腾适配文档。盘古 7B 模型资源将按计划逐步开放,持续关注官方公告可获取最新动态。
正文完
请使用微信扫一扫(自愿无偿打赏-乞讨)
post-qrcode
 0

未知文明

特别声明
网站内容部分通过网络收集、整理与优化,若您发现任何内容存在侵权问题,请及时通过admin@xwenming.com与我联系,将在核实后第一时间删除相关内容。
本站严格遵守法律法规,坚决不提供任何破解、侵权类技术支持或资源,所有内容仅用于学习交流与经验分享。感谢您的理解与支持,祝您在本站收获实用信息!
随机文章
LKY Office Tools:免费开源 Office 部署神器,一键自动化下载安装激活,绿色安全无捆绑

LKY Office Tools:免费开源 Office 部署神器,一键自动化下载安装激活,绿色安全无捆绑

装 Office 时总被复杂的步骤搞晕?要么找不到官方安装包,要么激活流程绕来绕去,担心第三方工具有毒有捆绑?...
NVIDIA/AMD/ 英特尔显卡驱动下载安装指南:官方渠道直达

NVIDIA/AMD/ 英特尔显卡驱动下载安装指南:官方渠道直达

更新显卡驱动是提升游戏性能、修复画面卡顿的关键操作,但第三方工具可能捆绑插件或推送旧版本。以下为NVIDIA、...
紧急提醒!Windows 11 23H2 支持 3 个月后到期,再不升级就危险了

紧急提醒!Windows 11 23H2 支持 3 个月后到期,再不升级就危险了

最近,科技圈的朋友们可能都在热议 Windows 10 即将于 10 月 14 日结束支持这件事,大家纷纷讨论...
网速跑不满?可能是光猫模式选错了,这篇教你秒变网速大神

网速跑不满?可能是光猫模式选错了,这篇教你秒变网速大神

兄弟们,你家宽带是不是号称千兆,但实际用起来总感觉差点意思? 游戏延迟高得离谱,多个人同时连网就卡顿,下载速度...
Darktable:免费开源的专业图片编辑软件,专注 RAW 格式后期处理,摄影党必备

Darktable:免费开源的专业图片编辑软件,专注 RAW 格式后期处理,摄影党必备

作为摄影爱好者,总在找一款既能专业修图又不花钱的工具?试过 Lightroom 觉得订阅费太贵,用 GIMP ...
OpenAI原生AI浏览器Atlas!值得拥有的N个理由和缺点~

OpenAI原生AI浏览器Atlas!值得拥有的N个理由和缺点~

OpenAI发布了AI原生浏览器chatgpt Atlas,并且所有人免费可用,它可以浏览网页,操作网页,也可...
Windows 11系统最佳性能优化设置指南:禁止windows收集个人信息

Windows 11系统最佳性能优化设置指南:禁止windows收集个人信息

功能 禁用诊断数据收集 关闭广告ID跟踪 停止活动历史记录 禁用Cortana 关闭Wi-Fi感知 恢复经典照...
几十GB模型下载到99%断网?这个开源神器不到10MB,速度起飞,0成本!

几十GB模型下载到99%断网?这个开源神器不到10MB,速度起飞,0成本!

用浏览器自带的下载器,眼瞅着进度条跑到99%,突然网络闪断了一下。😡 然后,整个下载直接提示失败,连个断点续传...
ContextMenuManager:一键清理右键菜单!自定义Windows快捷选项

ContextMenuManager:一键清理右键菜单!自定义Windows快捷选项

电脑用久了,右键菜单里堆满了各种冗余选项,找常用功能像 “大海捞针”?ContextMenuManager是一...
Win11 开机不用输密码!3 步实现自动登录,微软账号同步也不丢

Win11 开机不用输密码!3 步实现自动登录,微软账号同步也不丢

用 Win11 登微软账号的朋友,是不是总烦每次开机输密码 / PIN?想自动登录又怕丢了同步功能?其实不用纠...