生成式人工智能對中國CIO和安全團隊的影響
加入技術交流群
掃碼加入
和技術大咖面對面交流
海量資料庫查詢
ChatGPT的熱烈炒作、廣泛使用和快速蔓延提升了最終用戶對LLM和GenAI的認識，引發(fā)了一波商業(yè)實驗和AI初創(chuàng)企業(yè)的浪潮。2023年4月的Gartner網(wǎng)絡研討會發(fā)現(xiàn)，381名中國參會人員有70%已經(jīng)或計劃啟動GenAI項?，其中6%已在生產(chǎn)環(huán)境部署了GenAI，26%在試點GenAI，38%處于規(guī)劃階段。
本文引用地址：http://www.antipu.com.cn/article/202312/454130.htm
CIO及其安全團隊需要為GenAI的影響做好準備，在以下四個方面采取措施：
1. 為構建GenAI應用提供安全保護：AI應用攻擊面不斷擴大，產(chǎn)生了新的潛在風險，需要對現(xiàn)有應用安全實踐進行調整。
2. 管理和監(jiān)控使用GenAI的方式：各企業(yè)機構正在探索如何使用嵌?現(xiàn)有應用的GenAI助手，這些應用都有獨特的安全要求，是傳統(tǒng)安全控制措施無法滿足的。
3. 利用生成式網(wǎng)絡安全AI進行防御：有效抓住GenAI機遇，從而改善安全和風險管理、 優(yōu)化資源、抵御新興攻擊技術，甚至降低成本。Gartner將生成式?絡安全AI定義為 GenAI技術在網(wǎng)絡安全中的應用。
4. 為受到GenAI攻擊做好準備：GenAI工具和技術不斷發(fā)展，各企業(yè)機構必須適應惡意行為者不斷發(fā)展的技術或新的攻擊向量。
圖1對此進行了說明
CIO及其安全團隊不應只是試圖跟上新技術發(fā)展的步伐，也需要規(guī)劃和建立一致而有效的AI安全治理計劃，以應對GenAI采用激增的局面和各類新興場景。
AI安全治理項目應整體覆蓋組織架構、技術和政策。其早期任務之一就是制定所有構建或部署AI的團隊必須遵循的標準，包括安全AI開發(fā)、AI數(shù)據(jù)安全和AI安全應急響應標準。中國CIO和安全團隊應與利益相關者和企業(yè)機構領導者合作，制定五個階段的AI安全治理計劃（見表1）。
表1: AI安全治理項目的五個階段及主要行動
階段 | 主要行動 |
1.樹立意識 | 這一階段的關鍵是了解AI安全現(xiàn)狀。初步建立跨職能的指導委員會，可為確保所有利益相關者的參與打下基礎。 具體任務： § 清點AI應用和服務 § 了解威脅態(tài)勢 § 設立指導委員會，該委員會可以獨立運行，也可以是現(xiàn)有的AI指導委員會或網(wǎng)絡安全指導委員會的一部分 |
2.發(fā)現(xiàn)與維護 | 發(fā)現(xiàn)過程在這一階段真正開始。很多CIO發(fā)現(xiàn)，并沒有人在負責AI安全，也沒有人可以準確地清點企業(yè)的全部AI應用。 具體任務： § 根據(jù)業(yè)務影響識別用例并進行分類 § 識別相應的攻擊面 § 進行安全風險評估 § 起草“負責、批準、咨詢、告知（RACI）”矩陣，用于責任分配 |
3.彌補差距 | 在這一階段，安全漏洞被明顯摸清，為制定補救規(guī)劃奠定了基礎。使用第三方Gen AI應用或與供應商合作時，會明確定義選擇標準和流程。 具體任務： § 制定用戶政策、培訓和指南 § 定義廠商選擇流程和標準 § 更新RACI矩陣 |
4.集成 | 在這一階段，初步的關鍵網(wǎng)絡安全修復工作已經(jīng)完成，重點轉向持續(xù)監(jiān)控和長期管理 具體任務： § 將AI保護集成到集中統(tǒng)一的安全控制措施中 § 定義指標 § 加強指導委員會的參與和監(jiān)督 § 任命“安全大使”或“安全冠軍” |
5.優(yōu)化 | 重點是優(yōu)化網(wǎng)絡安全工作，以實現(xiàn)業(yè)務韌性、運營差異化和增長。 具體任務： § 培訓安全和業(yè)務人員 § 建立跨職能實踐社區(qū)（CoP）和開展研討會 § 針對集中式安全工具，開放共享訪問并共同承擔責任 |
評論