中國信通院順利召開大模型標準體系2.0研討會

會議時間:2023-09-06

會議類型:

圖片

近年來,大規模預訓練模型(以下簡稱“大模型”)作為人工智能領域的重大突破之一,參數規模和模型性能不斷創出新高,逐步夯實人工智能技術底座,加速推進人工智能實用化、通用化和普惠化發展進程。中國信息通信研究院(以下簡稱“中國信通院”)密切關注大模型技術能力、應用效能、產業服務、安全可信等全方位發展態勢,高度重視大模型研究、咨詢、標準、評測等共性需求。



2021年11月,中國信通院依托人工智能關鍵技術和應用評測工業和信息化部重點實驗室組建大模型工作組,廣泛吸納成員單位,共同圍繞技術研究、產業交流、標準制定、生態共建等方面開展工作,并初步取得成效。為進一步適應當前國內外大模型發展態勢,工作組在前期基礎上升級形成標準體系2.0。4月27日,大模型工作組順利召開大模型標準體系2.0研討會,來自工作組的組長單位、副組長單位、成員單位的70余位行業專家參會。會議由中國信通院南京新一代人工智能研究院高級業務主管張學強主持。


圖片


中國信通院云計算與大數據研究所人工智能部主任曹峰在開場致辭中指出,當前大模型的發展重心已逐步由學術打榜向工程實踐轉移,支撐人工智能應用創新與產業落地。然而,當前大模型仍存在隱私安全、數據投毒、惡意使用等問題,亟需通過標準制定、評估測試等工作進行引導。未來,工作組將以大模型標準體系2.0為中心與各方攜手共推大模型工程化進程、共筑大模型可信生態。


張學強對工作組相關工作進行總結,重點對大模型標準體系2.0進行介紹。中國信通院充分結合當前國內外大模型發展態勢以及前期研究基礎,在大模型標準體系1.0基礎上,升級并發布以“模型即服務MaaS”為核心的大模型標準體系2.0。標準體系2.0將全面關注大模型的模型化、能力化、工程化、產業化等維度,從模型開發、模型能力、模型運營、模型應用、安全可信五個方向持續構建和完善大模型標準體系。


圖片


來自中國信通院云計算與大數據研究所人工智能部、中國信通院南京新一代人工智能研究院的張丹、陸鐵文、陶秋雨、吳思奇等人,分別對《大規模預訓練模型技術和應用評估方法》系列標準的模型開發、模型能力、模型運營、模型應用、安全可信等五個部分進行了詳細介紹。


模型開發包含數據構建、模型訓練、模型管理和模型部署4個能力域,數據管理、數據處理、訓練方式等16個能力子域,共計60余個能力項,可用以評估研究主體開發大模型的能力。模型能力包含功能豐富度、性能優越度和服務成熟度3個評測維度,智能語義、智能視覺、智能語音、跨模態等8個能力域,共計30余個能力項,可用以評估大模型的各項技術能力。模型運營計劃圍繞數據工程、模型調優、模型交付、服務運營、平臺能力等維度,新增能力要求,即重點面向工具或平臺,提煉應具備的技術能力要求。模型應用擬從應用豐富度和應用成熟度兩個維度進行評價,圍繞行業覆蓋度、場景適配度、任務支持度、效果優越性、服務可靠性、定制滿足度等評估大模型應用階段的各項能力。安全可信擬從大模型研發運營等全生命周期評估大模型安全性、合規性、自主性、可信性,保障大模型安全可用。


?


本次會議對大模型標準2.0體系進行了全面介紹,明確了大模型標準的重點建設方向。未來,中國信通院將密切跟蹤大模型前沿動態,組建大模型產業推進方陣凝聚各方力量全力助推大模型產業發展,持續開展技術研究、標準研制、評估測試、產業交流、案例征集等工作。


如有合作意向,可聯系:


張老師

15722924458

zhangxueqiang@caict.ac.cn


陸老師

18761677976

lutiewen@caict.ac.cn