T/CAPT 011-2024 新闻行业 大规模预训练模型 语言模型评测要求

标准编号：T/CAPT 011-2024

标准名称：新闻行业 大规模预训练模型 语言模型评测要求

英文名称：News Industry—Large-scale pre-trained models—Requirements for language model evaluation

发布日期：2024-12-18

实施日期：2024-12-18

团体名称：中国新闻技术工作者联合会

起草人

路海燕、邓海滢、王仲豪、杨鹏、白子健、杨冬梅、唐波、熊飞宇、李志宇、余钰、席晨阳、刘丽芳、张健、张静、滕思敏、宋海洋、佘泽鹏、区可明、汤代禄、陈圣琳、张震、张丹、贾艾婧、罗毅、林波、成鹏、王宇琦、郑创伟、瞿曦、刘琼、张鹏洲、曹娟、王熠、梅春霖、黄菁、付蓉、王志民

起草单位

新华社媒体融合生产技术与系统国家重点实验室（新华融合媒体科技发展（北京）有限公司）、新华通讯社通信技术局、东南大学、上海算法创新研究院、传播大脑科技（浙江）股份有限公司、新华智云科技有限公司、拓尔思信息技术股份有限公司、大众报业集团（大众日报社）、北京北大方正电子有限公司、中国传媒大学、深圳创意智慧港科技有限责任公司（深圳报业集团技术公司）、福建理工大学

标准范围

本文件规定了新闻行业大规模预训练模型中语言模型的评测指标、评测方法、内容评测指标权重。

本文件适用于通讯社、报社、广播电台、电视台、杂志社、网络媒体等多种媒体机构在新闻领域大规模预训练模型运用中语言模型的评测活动。

标准文档截图