訊
享
務(wù)
|
7月4日,由全球數(shù)字經(jīng)濟(jì)大會組委會主辦、中國信息通信研究院承辦的2025全球數(shù)字經(jīng)濟(jì)大會數(shù)字生態(tài)建設(shè)專題論壇在北京舉行。騰訊云李濱代表團(tuán)隊做了主題分享,深入解析大模型面臨的安全風(fēng)險與技術(shù)挑戰(zhàn),并系統(tǒng)分享構(gòu)建與AI共生的智能安全防護(hù)體系的實踐路徑與策略。 大會同步公布中國信通院2025年度第二期“磐安”優(yōu)秀案例遴選結(jié)果。憑借創(chuàng)新技術(shù)架構(gòu)與實戰(zhàn)成效,騰訊云以NDR產(chǎn)品能力為基礎(chǔ)打造的態(tài)勢感知全流量檢測與響應(yīng)項目案例,獲評綜合領(lǐng)域優(yōu)秀案例,成為數(shù)字生態(tài)安全建設(shè)的標(biāo)桿實踐。 隨著AI技術(shù)的發(fā)展,機(jī)器已經(jīng)能夠超越圖靈測試的標(biāo)準(zhǔn),開始以更加人性化的方式與用戶進(jìn)行交流。以大模型生成技術(shù)為核心的人工智能正逐漸成為推動經(jīng)濟(jì)增長的新引擎,為解決各行各業(yè)的痛點提供了創(chuàng)新的解決方案。AI技術(shù)作為新的生產(chǎn)驅(qū)動力,正引領(lǐng)企業(yè)數(shù)字化轉(zhuǎn)型進(jìn)入“大模型時代”。 但 AI 熱潮背后,黑灰產(chǎn)暗流涌動,從個人隱私、企業(yè)資產(chǎn)到交通醫(yī)療等關(guān)鍵領(lǐng)域,AI 安全防線正面臨系統(tǒng)性沖擊。騰訊云安全總結(jié)了大模型企業(yè)應(yīng)用十大常見安全風(fēng)險,涵蓋樣本投毒、提示詞注入攻擊、第三方代碼或開源模型帶來的供應(yīng)鏈風(fēng)險,以及自動化Agent權(quán)限濫用、模型推理被劫持等新型AI應(yīng)用威脅。這些風(fēng)險貫穿于企業(yè)應(yīng)用大模型的各個環(huán)節(jié),構(gòu)成關(guān)鍵挑戰(zhàn)。李濱指出,大模型安全風(fēng)險并非孤立存在,而是從數(shù)據(jù)采集、處理、模型訓(xùn)練、部署到最終應(yīng)用的整個AI技術(shù)生命周期中端到端傳導(dǎo)的。 面對AI賦能的攻擊新范式,傳統(tǒng)安全防御體系已顯乏力,構(gòu)建適應(yīng)AI時代的新型防御體系,已成為數(shù)字安全領(lǐng)域的當(dāng)務(wù)之急。面對大模型的安全挑戰(zhàn),騰訊在大模型的應(yīng)用覆蓋了從底層技術(shù)研究、企業(yè)服務(wù)到終端應(yīng)用的全鏈路的解決方案。依托于騰訊在大模型上的“全局視角”,騰訊安全建立了一套系統(tǒng)性的框架,對整個人工智能以及大模型的安全進(jìn)行完備的風(fēng)險分析,通過業(yè)務(wù)流和技術(shù)棧兩個維度,來分析人工智能在本體安全、運行環(huán)境和基礎(chǔ)設(shè)施,應(yīng)用環(huán)境中和應(yīng)用環(huán)境周邊發(fā)生的一些風(fēng)險缺陷。 在風(fēng)險控制框架之下,騰訊也建立了大模型相關(guān)整體安全治理架構(gòu),從數(shù)據(jù)采集、模型訓(xùn)練、代理部署到業(yè)務(wù)應(yīng)用的全流程,均滿足監(jiān)管要求,為企業(yè)提供安全、可控、可靠的服務(wù)。 圍繞大模型生命周期各階段風(fēng)險,騰訊構(gòu)建了包含五大重點的大模型安全防護(hù)整體架構(gòu),針對性制定安全防護(hù)措施與策略:一是聚焦邊界API與用戶輸入輸出安全,通過安全管控機(jī)制防范該邊界的注入攻擊等風(fēng)險,防止不當(dāng)內(nèi)容的輸入輸出及數(shù)據(jù)泄露;二是強(qiáng)化模型基礎(chǔ)設(shè)施安全防護(hù)與態(tài)勢管理;三是實施智能體行為與意圖安全管控;四是加強(qiáng)智能體與MCP的身份及特權(quán)防護(hù);五是推進(jìn)數(shù)據(jù)安全全流程治理。 在模型應(yīng)用邊界安全方面,基于行業(yè)痛點騰訊研發(fā)LLM-WAF大模型防火墻。LLM-WAF提供多模型、多場景、高并發(fā)環(huán)境下的全鏈路防護(hù)能力,支持實時檢測并攔截針對大模型的算力濫用、提示詞攻擊及數(shù)據(jù)泄露風(fēng)險,助力企業(yè)構(gòu)建可信、穩(wěn)定、可持續(xù)的大模型服務(wù)生態(tài)。 在大模型安全態(tài)勢管理方面,騰訊推出AI-SPM大模型安全態(tài)勢管理產(chǎn)品以應(yīng)對大模型專項安全治理場景。該系統(tǒng)通過網(wǎng)絡(luò)掃描和主機(jī)端檢測,提供資產(chǎn)識別、風(fēng)險檢測、攻擊示警等核心能力,幫助用戶進(jìn)行大模型安全專項治理,保護(hù)大模型基礎(chǔ)設(shè)施運行環(huán)境,及時發(fā)現(xiàn)和處置安全風(fēng)險。 在數(shù)據(jù)與內(nèi)容安全上,數(shù)據(jù)層面是基于騰訊混元大模型,圍繞大模型的生命周期,根據(jù)不同階段的風(fēng)險制定對應(yīng)安全防護(hù)措施,通過數(shù)據(jù)分類分級、動態(tài)脫敏等技術(shù)保障數(shù)據(jù)安全;內(nèi)容安全上則是借助天御內(nèi)容風(fēng)控平臺,從大模型內(nèi)容安全綜合防控,接口輸入、內(nèi)容預(yù)處理、模型識別、策略輔助、平臺調(diào)度分析、人工標(biāo)注運營6個維度為大模型的訓(xùn)練和推理提供有效支撐。 在攻防對抗與情報方面,騰訊云安全建立了大模型安全Red Team對抗機(jī)制,基于騰訊安全專家服務(wù)團(tuán)隊,建立針對大模型的安全測試方法,主動發(fā)現(xiàn)大模型及生態(tài)存在的(漏洞)風(fēng)險,持續(xù)驗證大模型應(yīng)用的安全有效性。同時,在合法合規(guī)標(biāo)準(zhǔn)方面,騰訊云安全也積極參與大模型相關(guān)標(biāo)準(zhǔn)的制定工作,如參與起草《生成式人工智能應(yīng)用安全測試標(biāo)準(zhǔn)》和《大語言模型安全測試方法》國際標(biāo)準(zhǔn)等,依托自研大模型混元為企業(yè)保駕護(hù)航。 騰訊以全局視角和實戰(zhàn)經(jīng)驗為基礎(chǔ),圍繞大模型全生命周期構(gòu)建起系統(tǒng)性安全治理框架,并通過LLM-WAF、AI-SPM、Red Team機(jī)制等核心技術(shù)手段,推動防護(hù)能力向縱深演進(jìn)。 未來,騰訊將繼續(xù)攜手各方力量,持續(xù)完善大模型安全標(biāo)準(zhǔn)與防護(hù)能力,共筑可信、可控、可持續(xù)的AI安全防線,讓人工智能真正成為驅(qū)動社會進(jìn)步的可靠引擎。 |
|
原標(biāo)題: / 編輯: |
|