《通用大模型评测标准》发布
2024年10月12日 16:50
来源: 经济参考网
东方财富APP

方便,快捷

手机查看财经快讯

专业,丰富

一手掌握市场脉搏

手机上阅读文章

提示:

微信扫一扫

分享到您的

朋友圈

  10月12日,在2024中国移动全球合作伙伴大会期间,中国移动携手央企及产业各方共同发布大模型评测体系建设的重要成果《通用大模型评测标准》,为产业界遴选优质大模型提供重要参考依据。

  业内人士认为,大模型评测是助力人工智能赋能行业应用的重要一环。当前众多企业已启动大模型建设,亟须建立配套的通用大模型和行业大模型评测体系。

  据介绍,为发挥大模型评测领域的引领作用,中国移动联合电子标准院及16家重点央企共同开展大模型评测体系建设工作。第一阶段将围绕通用领域和4个重点行业领域,从评测标准制定、评测基地建设、评测试点应用等方面开展工作。

  目前,中国移动携手央企及产业各方遵循“确保评测权威、加强业界协同、解决实际问题、保持开放态度”的原则,初步完成通用大模型评测标准制定,得到行业龙头央企、业界头部公司、知名高校及科研机构充分认可,为后续试点评测等工作奠定了坚实基础。

  通用大模型评测标准基于“2-4-6”框架。“2”代表两类评测视角,以重点行业实际使用需求为导向,与国标对模型能力要求拉齐,将评测任务划分为理解和生成两类视角。“4”代表四类评测要素,从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素,确保评测工作可实施性。“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准广泛吸纳产学研用各方意见,并结合行业特色场景需求,可为通用大模型全面评估提供客观依据,为AI赋能千行百业提供保障。

  据悉,中国移动将联合行业龙头企业、业界头部公司、知名高校和科研机构,深入挖掘石油、电力、交通和物流等重点行业应用需求,持续打造并完善通用及行业大模型评测体系,积极建设大模型评测基地,广泛征集各中央企业及头部民企积极参与大模型评测,打造落地应用最佳实践。

(文章来源:经济参考网)

文章来源:经济参考网 责任编辑:91
原标题:《通用大模型评测标准》发布
郑重声明:东方财富发布此内容旨在传播更多信息,与本站立场无关,不构成投资建议。据此操作,风险自担。
举报
分享到微信朋友圈

打开微信,

点击底部的“发现”

使用“扫一扫”

即可将网页分享至朋友圈

扫描二维码关注

东方财富官网微信


扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-61278686 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:4000300059/952500