国产中文大语言模型“天河天元”发布

IT之家 5 月 21 日消息,5 月 18 日,2023 第七届世界智能大会于国家会展中心(天津)正式开始,大会智能科技展期为期四天。

此次智能科技展统筹规划了 8 大展馆和室外展区,设置了信息技术应用创新、人工智能、5G + 工业互联网、智能交通、智能制造、智慧生活、数字金融、数字健康、国际与省市等主题展示区,以及智能驾驶、5G 两大体验专区。

天河新一代超级计算机是中国新一代百亿亿次超级计算机,也在此次展会迎来首次亮相。多年来,天河超级计算机从千万亿次到百亿亿次(IT之家注:新一代超级计算机非天河一号,其系统双精度浮点峰值计算性能达 200P Flops、数据存储能力不低于 20PB、峰值功耗不高于 8 兆瓦,比“天河一号”算力提高了 150 倍),不断挑战世界算力速度极限,而天津依托天河占据了全国超过 20% 的超级计算算力资源。

为充分发挥超算在算力方面的优势,推动国产异构超级计算机平台在 AI 应用开发和服务领域中的应用,国家超算天津中心在第七届世界智能大会期间举行的世界智能科技创新合作峰会上发布了“天河 E 级智能计算开放创新平台”和“天河天元大模型”。

▲ 图源:国家超算天津中心

据介绍,中文大语言模型的数据集非常稀缺。国家超算天津中心搜集整理了网页数据、各种开源训练数据、中文小说数据、古文数据、百科数据、新闻数据,以及专业领域的中医、医药、问诊、法律等多种数据集,训练数据集总 token 数达到 350B,终训练打造出了自己的中文语言大模型 —— 天河天元大模型。

天河新一代超级计算机实现了从硬件到软件环境全面自主的信息技术应用创新,也在展区展示了天河新一代超级计算机上采用的计算芯片、主板等核心技术。

据悉,“天河 E 级智能计算开放创新平台”将带来突破百亿亿次的跨模态的超级计算算力,支撑传统的科学工程计算,并服务智能混合计算,打造全方位的算力赋能创新和数字经济高质量发展载体。

未来,国家超算天津中心还将在“天河天元大模型”的基础上启动深度训练面向医疗、工业、法律等领域的专业模型。未来大模型将在深度学习平台的支撑下成为产业智能化基座。

以上就是【国产中文大语言模型“天河天元”发布】的相关内容,查看其它ai资讯请关注微咔网

服务及版权声明

根据二〇〇二年一月一日《计算机软件保护条例》第十七条规定:为了学习和研究软件内含的设计思想和原理,通过安装、显示、传输或者存储软件等方式使用软件的,可以不经软件著作权人许可,不向其支付报酬。

本网站所有发布的源码、软件和资料,均为作者提供或网友推荐收集各大资源网站整理而来,仅供功能验证和学习研究使用。

所有资源的文字介绍均为网络转载,本站不保证相关内容真实可信,同时不保证所有资源100%无错可用,也不提供相应的技术支持,介意勿下。

您必须在下载后24小时内删除,不得用于非法商业用途,不得违反国家法律,一切关于该资源的商业行为与本站无关。

如果您喜欢该程序,请支持正版源码,得到更好的正版服务。、如有侵犯你的版合法权益,请邮件与我们联系处理【投诉/建议发送至邮箱:3066548754@qq.com】,本站将立即改正并删除。

本声明为本站所有资源最终声明,所有与本声明不符的表述均以本声明内容为准。


微咔网 » 国产中文大语言模型“天河天元”发布
享更多特权,建议使用 QQ 登录
喜欢我嘛?喜欢就按“ctrl+D”收藏我吧!♡