在2024中国移动全球合作伙伴大会期间,中国移动联合多家央企及产业界各方共同发布了《通用大模型评测标准》,这一重要成果为大模型产业的健康发展提供了关键参考依据。业内人士普遍认为,大模型评测是推动人工智能技术广泛应用于各行各业的关键环节。
随着众多企业纷纷投身大模型建设,迫切需要一套完善的通用大模型和行业大模型评测体系。为此,中国移动联合电子标准院及16家重点央企,共同开展了大模型评测体系建设工作。初期工作重点围绕通用领域及石油、电力、交通和物流等四个重点行业领域,涵盖了评测标准制定、评测基地建设以及评测试点应用等方面。
在多方共同努力下,遵循“确保评测权威、加强业界协同、解决实际问题、保持开放态度”的原则,中国移动已初步完成通用大模型评测标准的制定。这一标准得到了行业龙头央企、头部企业、知名高校及科研机构的广泛认可,为后续的试点评测等工作打下了坚实基础。
《通用大模型评测标准》基于“2-4-6”框架构建。其中,“2”代表两类评测视角,即以重点行业实际使用需求为导向,将评测任务划分为理解和生成两类;“4”则指四类评测要素,包括评测工具、数据、方式和指标,确保评测工作的可实施性;“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定了功能性、准确性、可靠性、安全性、交互性和应用性等六个方面的评估标准。该标准广泛吸纳了产学研用各方的意见,并结合行业特色场景需求,为通用大模型的全面评估提供了客观依据,保障了AI技术更好地服务于千行百业。
未来,中国移动将继续联合行业龙头企业、头部公司、知名高校和科研机构,深入挖掘重点行业的应用需求,持续完善通用及行业大模型评测体系,积极建设大模型评测基地,并广泛征集中央企业及头部民企参与评测,以打造最佳的应用实践。
通过这一系列举措,中国移动不仅在推动自身技术进步,更在引领整个AI产业的健康有序发展,为人工智能技术的广泛应用和产业升级提供了有力支撑。
点击进入莞讯网首页>>