搜尋
首頁科技週邊人工智慧人工智慧高歌猛進背後暗藏多重安全風險

試想一下,有人將一張“貼紙”貼在面部,就可以使人臉識別門禁系統誤認為是你,從而輕而易舉地打開大門;同樣是這張“貼紙”,把它貼在眼鏡上,就可以1秒鐘解鎖你的手機人臉識別,探取隱私如入無人之境。這並非科幻大片的想像,而是首屆人工智慧安全大賽頒獎典禮現場展示的真實攻防場景。

人工智慧高歌猛進背後暗藏多重安全風險

前不久,由國家工業資訊安全發展研究中心、清華大學人工智慧研究院和北京瑞萊智慧科技有限公司等單位共同主辦的首屆人工智慧安全大賽落幕。大賽期間,有關人工智慧安全風險引發討論。與會專家表示,人工智慧安全風險已非未來挑戰,而是眼前威脅,要重視人工智慧安全體系建設,加速促進人工智慧安全領域關鍵技術研究與攻防實務。

人工智慧和其他通用技術一樣,在高歌猛進的同時,也帶來了一定的風險和隱患。曾獲「吳文俊人工智慧優秀青年獎」的瑞萊智慧執行長田天認為,人工智慧技術風險發生的範圍,正隨著應用場景的日趨廣泛而逐步擴大,風險發生的可能性也隨著其應用頻次的成長而持續提高。在他看來,人工智慧目前的安全風險主要可以從「人」與「系統」這兩個視角來剖析。

從人的角度來評估人工智慧的安全問題,首當其衝就是技術的兩面性問題,存在著人工智慧濫用的問題。具體到人工智慧的應用中來看,最典型的代表就是深度偽造技術,它的負向應用風險持續加劇且已產生實質危害。

這次大賽的人臉辨識破解演示,所揭示的正是系統的風險,它來自深度學習演算法本身的脆弱性。以深度學習演算法為核心的第二代人工智慧是個“黑盒子”,具有不可解釋性,意味著系統存在結構性的漏洞,可能受到不可預測的風險,典型的就比如現場演示的“神奇貼紙” ,其實就是“對抗樣本攻擊”,透過在輸入資料中添加擾動,使得系統做出錯誤判斷。

這漏洞在自動駕駛感知系統同樣存在。正常情況下,在識別到路障、指示牌、行人等目標後,自動駕駛車輛就會立即停車,但在目標物體上添加干擾圖案後,車輛的感知系統可能會出錯,徑直撞上去。

大賽期間,《人工智慧算力基礎設施安全發展白皮書》發布。其中提到,人工智慧算力基礎設施不同於傳統的算力基礎設施,既是“基礎設施”又是“人工智慧算力”也是“公共設施”,具有基建屬性、技術屬性、公共屬性三重屬性。相應地,推動人工智慧算力基礎設施安全發展應從強化自身安全、保障運作安全、助力安全合規三個面向發力。

統籌發展與安全,似乎是每項新科技發展過程中面臨的必然問題,如何實現高水準發展與高水準安全的良性互動,也是當前人工智慧產業發展最為重要的命題之一,現場多位專家就此話題展開討論。

「人工智慧對抗攻防包括對抗樣本、神經網路後門、模型隱私問題等多方面技術。模型有錯誤,就需要及時的修復。」中國科學院資訊安全國家重點實驗室副主任陳愷提出「神經網路手術刀」的方法,透過定位引發錯誤的神經元,進行精準「微創」修復。

陳愷表示,不同於傳統的模型修復工作需要重新訓練模型,或者依賴較大量的數據樣本,這種方式類似於“微創手術”,只需極少量數據樣本,能夠大幅提升模型修復效果。

開放環境下的人工智慧系統面臨諸多安全挑戰,如何解決通用人工智慧演算法全週期的安全保障問題成為重中之重。

北京航空航天大學軟體開發環境國家重點實驗室副主任劉祥龍表示,從技術上來看應形成從安全性測試到安全性分析與安全性加固的完整技術手段,最終形成標準化的測試流程。

他同時指出,未來的人工智慧安全應該圍繞著從資料、演算法到系統各個層次的全面評測,同時配合一套從硬體到軟體的安全可信任運算環境。

工商銀行金融研究院安全攻防實驗室主管專家蘇建明表示,人工智慧安全治理需要廣泛協作和開放創新,需加強政府、學術機構、企業等產業各參與者的互動合作,建立積極的生態規則。政策層面加速人工智慧的立法進程,加強對人工智慧服務水準、技術支撐能力等專案監督考核力度。學術層面,加大對人工智慧安全研究的激勵投入,透過產學研合作模式加速科研成果的轉化與落實。企業層面,逐步推動人工智慧技術由場景拓展向安全可信發展轉變,透過參與標準制定,推出產品服務,持續探索人工智慧安全實踐及解決方案。

事實上,建構人工智慧的安全生態,一方面需要技術的持續演進,一方面也需要專項技術人才的建構與培養。田天表示,由於人工智慧安全研究目前仍屬於新興領域,專項人才較少,缺乏系統性的研究隊伍,此次大賽透過實戰演練的方式,驗證和提升選手實戰能力,為培育一批高水平、高層次的人工智慧安全新型人才團隊提供了「快速通道」。

專家們認為,從長遠看,人工智慧的安全問題,還需從演算法模型的原理上突破,唯有持續加強基礎研究,才能破解核心科學問題,同時他們強調,人工智慧的未來發展需確保對整個社會、國家發展的有效性和正向促進性,需要政產學研用多方協同共進。

以上是人工智慧高歌猛進背後暗藏多重安全風險的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:51CTO.COM。如有侵權,請聯絡admin@php.cn刪除
最新的最佳及時工程技術的年度彙編最新的最佳及時工程技術的年度彙編Apr 10, 2025 am 11:22 AM

對於那些可能是我專欄新手的人,我廣泛探討了AI的最新進展,包括體現AI,AI推理,AI中的高科技突破,及時的工程,AI培訓,AI,AI RE RE等主題

歐洲的AI大陸行動計劃:Gigafactories,Data Labs和Green AI歐洲的AI大陸行動計劃:Gigafactories,Data Labs和Green AIApr 10, 2025 am 11:21 AM

歐洲雄心勃勃的AI大陸行動計劃旨在將歐盟確立為人工智能的全球領導者。 一個關鍵要素是建立了AI Gigafactories網絡,每個網絡都有大約100,000個高級AI芯片 - 2倍的自動化合物的四倍

微軟的直接代理商故事是否足以創造更多的粉絲?微軟的直接代理商故事是否足以創造更多的粉絲?Apr 10, 2025 am 11:20 AM

微軟對AI代理申請的統一方法:企業的明顯勝利 微軟最近公告的新AI代理能力清晰而統一的演講給人留下了深刻的印象。 與許多技術公告陷入困境不同

向員工出售AI策略:Shopify首席執行官的宣言向員工出售AI策略:Shopify首席執行官的宣言Apr 10, 2025 am 11:19 AM

Shopify首席執行官TobiLütke最近的備忘錄大膽地宣布AI對每位員工的基本期望是公司內部的重大文化轉變。 這不是短暫的趨勢。這是整合到P中的新操作範式

IBM啟動具有完整AI集成的Z17大型機IBM啟動具有完整AI集成的Z17大型機Apr 10, 2025 am 11:18 AM

IBM的Z17大型機:集成AI用於增強業務運營 上個月,在IBM的紐約總部,我收到了Z17功能的預覽。 以Z16的成功為基礎(於2022年推出並證明持續的收入增長

5 Chatgpt提示取決於別人並完全相信自己5 Chatgpt提示取決於別人並完全相信自己Apr 10, 2025 am 11:17 AM

解鎖不可動搖的信心,消除了對外部驗證的需求! 這五個CHATGPT提示將指導您完全自力更生和自我感知的變革轉變。 只需複制,粘貼和自定義包圍

AI與您的思想危險相似AI與您的思想危險相似Apr 10, 2025 am 11:16 AM

人工智能安全與研究公司 Anthropic 最近的一項[研究]開始揭示這些複雜過程的真相,展現出一種令人不安地與我們自身認知領域相似的複雜性。自然智能和人工智能可能比我們想像的更相似。 窺探內部:Anthropic 可解釋性研究 Anthropic 進行的研究的新發現代表了機制可解釋性領域的重大進展,該領域旨在反向工程 AI 的內部計算——不僅僅觀察 AI 做了什麼,而是理解它在人工神經元層面如何做到這一點。 想像一下,試圖通過繪製當有人看到特定物體或思考特定想法時哪些神經元會放電來理解大腦。 A

龍翼展示高通的邊緣動力龍翼展示高通的邊緣動力Apr 10, 2025 am 11:14 AM

高通的龍翼:企業和基礎設施的戰略飛躍 高通公司通過其新的Dragonwing品牌在全球範圍內積極擴展其範圍,以全球為目標。 這不僅僅是雷布蘭

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
3 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

SecLists

SecLists

SecLists是最終安全測試人員的伙伴。它是一個包含各種類型清單的集合,這些清單在安全評估過程中經常使用,而且都在一個地方。 SecLists透過方便地提供安全測試人員可能需要的所有列表,幫助提高安全測試的效率和生產力。清單類型包括使用者名稱、密碼、URL、模糊測試有效載荷、敏感資料模式、Web shell等等。測試人員只需將此儲存庫拉到新的測試機上,他就可以存取所需的每種類型的清單。

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

Atom編輯器mac版下載

Atom編輯器mac版下載

最受歡迎的的開源編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用