螞蟻集團、騰訊、百度等聯(lián)合編制大模型安全國際標準正式發(fā)布

宋妤
2024-04-17 17:48

4月17日消息,第 27 屆聯(lián)合國科技大會(the 27th UN CSTD Annual Meeting)正在瑞士日內瓦召開。大會期間,世界數(shù)字技術院(WDTA)發(fā)布了兩項國際標準:《生成式人工智能應用安全測試標準》、《大語言模型安全測試方法》。

這兩項國際標準是由 OpenAI、螞蟻集團、科大訊飛、谷歌、微軟、英偉達、百度、騰訊等數(shù)十家單位的多名專家學者共同編制而成。螞蟻集團牽頭編制《大語言模型安全測試方法》,并參與制定了《生成式人工智能應用安全測試標準》。

format-jpg

圖源:螞蟻集團公眾號

這次發(fā)布的兩項標準是大模型及生成式 AI 應用程序方面的安全性測試標準,有助于行業(yè)構建安全、可靠的人工智能生態(tài)系統(tǒng)。

《生成式人工智能應用安全測試標準》由 WDTA 作為牽頭單位,螞蟻集團等多家單位共同參與。這項標準為測試和驗證生成式 AI 應用的安全性提供了一個框架,特別是那些使用大語言模型(LLM)構建的應用程序。它定義了人工智能應用程序架構每一層的測試和驗證范圍,包括基礎模型選擇、嵌入和矢量數(shù)據(jù)庫、RAG 或檢索增強生成、AI 應用運行時安全等等。

《大語言模型安全測試方法》由螞蟻集團作為牽頭單位。這項標準則為大模型本身的安全性評估提供了一套全面、嚴謹且實操性強的結構性方案。它提出了大語言模型的安全風險分類、攻擊的分類分級方法以及測試方法,并率先給出了四種不同攻擊強度的攻擊手法分類標準,系統(tǒng)地提供了大語言模型抗攻擊測試的評估指標、能力分級、測試數(shù)據(jù)集構建要求和測試流程等。

format-jpg

WDTA 官網(wǎng)發(fā)布《大語言模型安全測試方法》標準 圖源:螞蟻集團公眾號

螞蟻集團機器智能部總經(jīng)理、螞蟻安全實驗室首席科學家王維強表示,生成式 AI 將釋放巨大的生產力,但也要對它帶來的新風險高度警惕。大型科技公司應在促進生成式 AI 安全和負責任的發(fā)展中有所擔當,利用其資源、專業(yè)知識和影響力推動最佳實踐,構建一個優(yōu)先考慮安全、隱私、可靠和倫理優(yōu)先的生態(tài)系統(tǒng)。

1、該內容為作者獨立觀點,不代表電商派觀點或立場,文章為作者本人上傳,版權歸原作者所有,未經(jīng)允許不得轉載。
2、電商號平臺僅提供信息存儲服務,如發(fā)現(xiàn)文章、圖片等侵權行為,侵權責任由作者本人承擔。
3、如對本稿件有異議或投訴,請聯(lián)系:info@dsb.cn
相關閱讀
螞蟻集團發(fā)布模型安全一體化解決方案“蟻天鑒”。
12月27日消息,“勢起AI智啟新界”模型創(chuàng)新應用與安全治理大會近日在廣州舉辦,會上,螞蟻集團安全實驗室首席科學家、可信AI負責人王維強圍繞“模型安全的緊迫性和實踐”發(fā)表主旨演講。他表示,模型安全既要“快”也要“慢”,模型安全防御方面要“快”,要能快速檢測、查殺病毒,確保服務無毒害;在模型安全可信方面要“慢”,要能長遠地、體系化地保證整個系統(tǒng)環(huán)境的可控、可信。
天象安全實驗室重點針對模型供應鏈安全,包括模型訓練、微調、部署、運維的完整生命周期內涉及到的三方庫、插件、框架等問題。
工作組將協(xié)同國內外模型產業(yè)力量,制定模型技術規(guī)范、測評方法、安全可信、可靠決策等領域國際先進標準,為全球模型產業(yè)技術創(chuàng)新和發(fā)展提供支撐。
根據(jù)合作協(xié)議,雙方將圍繞“下一代互聯(lián)網(wǎng)應用安全技術”長期攻堅,先期聚焦在可信AI和安全通用模型兩個核心領域。同時,雙方還將開展“安全通用模型”的技術路線和落地研究,以應對模型技術爆發(fā)時代的安全科技生產力問題,及通用AI能力廣泛應用帶來的新型未知風險防控。
1月8日消息,在智源研究院舉辦的AI十大趨勢發(fā)布會上,螞蟻集團科技戰(zhàn)略與執(zhí)行部副總經(jīng)理彭晉就AI安全做了分享,他表示,作為復雜系統(tǒng),模型的Scaling帶來了涌現(xiàn),但復雜系統(tǒng)特有的涌現(xiàn)結果不可預測、循環(huán)反饋等特有屬性也對傳統(tǒng)工程的安全防護機制帶來了挑戰(zhàn),風險因素在數(shù)據(jù)、算法、應用層面均會出現(xiàn)。他認為,模型能力提升與風險預防并重,AI安全治理體系持續(xù)完善。
螞蟻集團模型研發(fā)團隊透露將投入近20%的技術人員建設科技倫理,還與8所高校機構開展共建科技倫理知識體系。
    亚洲无码高清自拍偷拍自慰av网站,免费高清无码黄色网,欧美一级片免费在线观看,午夜毛片在线观看