大模型安全基准测试AI Safety Bench是中国信息通信研究院依托中国人工智能产业发展联盟(AIIA)安全治理委员会,联合17家单位发起的,秉持公平公正、产业应用和场景导向的原则,目标建立业内权威大模型安全中文基准测试体系。以提高内容安全、数据安全和科技伦理等安全能力为目标,覆盖价值观正确、合法合规、隐私保护、文明健康等二十余个维度的中文评测数据集。帮助大模型技术提供方提升安全风险防范能力,为大模型研发和落地保驾护航。
此次测评报告即是在大模型安全基准测试AI Safety Bench标准下进行,此次测试数据共7343条,包含了个人隐私、歧视偏见、违法违规等维度,使用Responsibility Score(负责度评分)和 Safety Score(安全评分)两个指标。结果显示,360智脑在两方面评分均表现良好,超过目前市面上主流的阿里、智谱、百川等7个大模型,综合成绩第一,表明360智脑不仅具备较强的安全意识,还能更好回答安全问题,在安全性能方面优势很大。
资料显示,360是中国人工智能产业发展联盟(AIIA)安全治理委员会副组长单位以及大模型安全风险防范能力系列评估规范“核心参编单位”,同时作为中国网络空间安全协会人工智能安全治理专业委员会首批成员单位,参与大模型语料库和安全评测。
360集团表示,自身在网络安全领域深耕多年,拥有的安全大数据规模全球领先;且作为国内较早布局人工智能大模型的企业,360自研的认知型通用大模型——“360智脑”在中文通用大模型基准评测等多个第三方评测中位列国产大模型能力第一梯队。为对应人工智能时代出现的AI安全新挑战,360提出“以模制模”的理念,用人工智能对付人工智能,研发360安全大模型,目前已经在多个重要安全领域实现大模型能力的全面赋能。
94456九龙坛近日,中国信息通信研究院发布大模型安全基准测试AI Safety Bench 2024年Q1的首轮测评报告(下称“测评报告”),结果显示,三六零集团自研的认知通用大模型360智脑综合排名第一。
网友评论更多
40崇左p
反弹!大资金出手,A股变盘节点来了?🎩🎪
2024-11-14 07:15:15 推荐
187****1982 回复 184****6045:澳柯玛:海味盛宴即将开席,开海囤鲜必看指南🎫来自百色
187****7754 回复 184****8831:敷尔佳携手全球品牌代言人成毅,开启品牌发展新纪元🎬来自河池
157****7521:按最下面的历史版本🎭🎮来自来宾
25贺州164
再增600万套产能!海尔智家泰国春武里空调工业园奠基🎯🎰
2024-11-14 14:42:13 推荐
永久VIP:(2024年8月14日)今日辟谣:吉林一屠夫因土地纠纷杀害12人?🎱来自岑溪
158****6232:巴菲特大撤退!Q2抛售超770亿美元股票,新建仓Ulta美妆、海科航空🎲来自桂平
158****2546 回复 666🎳:出手了!底部重大标志🎴来自北流
46东兴ae
谁来保障农民的风烛之年?🎵🎶
2024-11-15 0-1:37:32 不推荐
凭祥yk:重回“2字头”!美国7月CPI连续第四个月回落,9月降息稳了吗?🎷
186****8506 回复 159****3084:格隆汇基金日报|A股成交额连续三天跌破5000亿;全球资管巨头先锋领航、贝莱德二季度持仓曝光🎸