中國移動 高東輝 -生成式人工智能內(nèi)容安全與倫理風(fēng)險檢測關(guān)鍵技術(shù)研究及示范應(yīng)用2023：中國移動“弈衡”大模型評測體系

打造中國移動大模型打造中國移動大模型1中國移動技術(shù)能力評測中心打造國資央企權(quán)威第三方評測機構(gòu)愿景：成為國資央企核心技術(shù)能力的度量衡和磨刀石目標(biāo)：以公司“一體五環(huán)”重點產(chǎn)品和能力評測為中心，打造權(quán)威、中立、客觀的第三方技術(shù)能力評測機構(gòu)積淀全棧評測技術(shù)涉及領(lǐng)域廣工具手段精數(shù)據(jù)積累多涉及領(lǐng)域廣工具手段精數(shù)據(jù)分析類數(shù)據(jù)分析類2助力打造優(yōu)質(zhì)產(chǎn)品助力打造優(yōu)質(zhì)產(chǎn)品，繪制并逐步拓展CHBNGV全領(lǐng)域技術(shù)能力評測能力個人/新興業(yè)務(wù)（CN）云游戲云游戲云云AR云云VR云手機云手機云盤云盤云魔百和云魔百和超級超級SIM中間號中間號5G新通話5G新通話5G消息5G消息移動認(rèn)證移動認(rèn)證數(shù)字貨幣數(shù)字貨幣云渲染云渲染視頻直播視頻直播視頻點播視頻點播數(shù)字身份數(shù)字身份數(shù)字人數(shù)字人視頻彩鈴視頻彩鈴……家庭業(yè)務(wù)（H）家庭連接家庭連接家庭寬帶家庭寬帶視頻通話視頻通話室內(nèi)攝像頭室內(nèi)攝像頭實時音視頻實時音視頻智能音箱智能音箱智能網(wǎng)關(guān)智能網(wǎng)關(guān)家庭安全家庭安全音頻通信音頻通信教育加速教育加速游戲加速游戲加速智能門鎖智能門鎖高清機頂盒高清機頂盒智能交互智能交互健康養(yǎng)老健康養(yǎng)老云魔百盒云魔百盒語音交互語音交互智能門窗磁智能門窗磁……行業(yè)應(yīng)用（BGV）證薦頻薦視推用品薦通產(chǎn)推控AI點量…為促進大模型技術(shù)進步和產(chǎn)業(yè)發(fā)展為促進大模型技術(shù)進步和產(chǎn)業(yè)發(fā)展，推進大模型評測工作，中國中文信息學(xué)會正式成立CCIR大模型評測工作組，并由專委會副主任郭嘉豐向中國移動技術(shù)能力評測中心主任劉偉東授牌4召開大模型評測技術(shù)峰會，推進行業(yè)發(fā)展組織百度、訊飛、清華、北郵、組織百度、訊飛、清華、北郵、中國科學(xué)院計算所、中國信通院等業(yè)界頭部企業(yè)及機構(gòu)，召開“眾智評鑒、測行致遠(yuǎn)”大模型評測及應(yīng)用研討會，發(fā)布業(yè)界首個評測體系白皮書5承接各級大模型評測任務(wù)，促進國產(chǎn)大模型成熟應(yīng)用根據(jù)國資委要求，落實戰(zhàn)新大模型評測任務(wù)，助力國資央企大模型成熟ü構(gòu)建國內(nèi)市場通用、公認(rèn)的人工智能測試評估體系，健全人工智能服務(wù)體系ü為國資央企大模型提供評測服務(wù)與北京市政府合作，評測北京市主流大模型ü聚焦教育、醫(yī)療、政務(wù)、交通等領(lǐng)域的業(yè)務(wù)場景，對政務(wù)行業(yè)大模型開展評測ü為北京市發(fā)展大模型編寫內(nèi)參支撐集團開展常態(tài)化評測工作ü對國內(nèi)外30余款主流大模型開展多輪評測ü形成洞察分析報告，助力大模型決策64評測維度評測要素評測方式評測指標(biāo)評測數(shù)據(jù)評測工具4評測維度評測要素評測方式評測指標(biāo)評測數(shù)據(jù)評測工具評測場景評測場景基礎(chǔ)任務(wù)應(yīng)用任務(wù)7Vicuna-13BVicuna-13B市場市場t院所