脑海大模型

122次阅读

脑海大模型

“鹏城·脑海”大模型官网地址:https://openi.pcl.ac.cn/extension/mind

鹏城·脑海(PengCheng Mind、通用AI大模型

2023年9月21日上午,鹏城实验室主任、中国工程院院士高文在2023华为全联接大会上正式发布了“鹏城·脑海”(PengCheng Mind、通用AI大模型,以国产化基座大模型为新一代AI大模型发展构筑新基点。

高文主任介绍,“鹏城·脑海”通用AI大模型以稠密型架构实现2000亿参数,依托“鹏城云脑II”国产化AI算力平台进行全程预训练,采用了MindSpore昇思国产化深度学习框架,完善了大规模并行训练策略、底层算子性能和容错机制,显著提升了国产算力平台的训练效率,并构建了一套涵盖中文、英文及50余个“一带一路”沿线国家及地区语种的多样化语料数据集和数据质量评估工具集。本次发布的是以中文为核心的“鹏城·脑海”基础版,将在启智社区向全社会开源。

启智AI协作平台

启智开源社区旗下的一站…

脑海大模型版本

此次发布的脑海大模型包括“两千亿参数”和“七十亿参数”的PengCheng-Mind 200B、PengCheng-Mind 7B,均是基于“中国算力网”国产化AI算力平台和“MindSpore”国产化深度学习框架的全国产大模型。其中PengCheng-Mind 7B的模型,支持NPU版本到GPU版本的转换。

脑海大模型历史消息

2023年5月29日,在第二届粤港澳大湾区(广东、算力产业大会暨首届中国算力网大会上,中国工程院院士、鹏城实验室主任高文透露:鹏城实验室将推出“鹏城·脑海”大模型计划,打造国内首个完全自主可控、安全可控、开源开放的自然语言预训练大模型底座。面向数字政务、智慧金融、智能制造等应用场景,鹏城实验室将开放基于“鹏城·脑海”大模型底座的合作,共建国产自主可控预训练大模型健康生态。

鹏城实验室

鹏城实验室,又称深圳网络空间科学与技术省实验室,是中央批准成立的突破型、引领型、平台型一体化的网络通信领域新型科研机构,始建于2018年3月,主要从事该领域战略性、前瞻性、…

依托“鹏城云脑”,诞生了全球首个全开源的两千亿参数中文预训练语言大模型“鹏城·盘古”、全球首个知识增强千亿大模型“鹏城-百度·文心”、性能达国际先进水平的十亿参数视觉大模型“鹏城·大圣”等大模型。

鹏程·盘古α大模型

鹏程·盘古α是业界首个2000亿…


文心大模型

文心大模型创意应用空间是一…

“鹏城·脑海”大模型推广计划

“鹏城·脑海”大模型将进一步依托“中国算力网”接入的协同算力,以“算力网算力调度+模型赋能”相结合的方式,携手国家新一代AI公共算力平台,共同推动国产化AI大模型的持续演进与部署应用,最终打造一个基于“中国算力网”的各类领域AI大模型及应用生态的数字化基座。与此同时,实验室将牵头成立“鹏城·脑海”开源联合体,广泛联合企业、高校和科研院所,通过这一全新的开源群智合作模式,“一揽子”提供覆盖压缩、部署、微调与价值对齐等环节的模型工具,并加强大模型的开源管理与资源共享,加速为千行百业插上人工智能的“翅膀”。

前往AI网址导航

正文完
 0
微草录
版权声明:本站原创文章,由 微草录 2024-01-05发表,共计1297字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。