CyberQ 賽博客
沒有結果
觀看所有搜尋結果
  • Home
    • 關於我們
    • 隱私權政策
  • 新聞
  • 基礎教學
    • NAS 基礎設定
  • Docker / 容器
    • 虛擬化
  • 資安專區
    • ISO 合規
  • AI 應用實戰
  • 進階應用
    • DevOps
    • 程式開發
    • 企業解決方案
  • DR.Q 快問快答
  • 開箱測試
  • 展覽直擊
聯繫我們
  • Home
    • 關於我們
    • 隱私權政策
  • 新聞
  • 基礎教學
    • NAS 基礎設定
  • Docker / 容器
    • 虛擬化
  • 資安專區
    • ISO 合規
  • AI 應用實戰
  • 進階應用
    • DevOps
    • 程式開發
    • 企業解決方案
  • DR.Q 快問快答
  • 開箱測試
  • 展覽直擊
沒有結果
觀看所有搜尋結果
CyberQ 賽博客
沒有結果
觀看所有搜尋結果
  • Home
  • 新聞
  • 基礎教學
  • Docker / 容器
  • 資安專區
  • AI 應用實戰
  • 進階應用
  • DR.Q 快問快答
  • 開箱測試
  • 展覽直擊
首頁 新聞 AI 人工智慧

Anthropic 揭示只需少量樣本即可植入 AI「臥底程式」的後門攻擊

Ashley Hsieh by Ashley Hsieh
2025 年 10 月 16 日
Reading Time: 1 mins read
A A
Anthropic 揭示只需少量樣本即可植入 AI「臥底程式」的後門攻擊
7
分享數
140
觀看數
分享到臉書分享到 X分享到Line分享到 Threads分享到 Linkedin

Amazon 投資的 AI 巨頭 Anthropic 最近發表的一篇震撼性研究,揭示了一種名為「小樣本汙染(Small-Sample Poisoning)」的攻擊手法,證明攻擊者僅需在微調資料中注入極少量的惡意樣本,就能在模型中植入難以察覺的「臥底程式(Sleeper Agent)」,等待特定時機發動奇襲。

RELATED POSTS

新品聚焦不中斷服務、AI 與資料韌性 – QNAP World Tour 2025 台北展場直擊

Backblaze 13 年資料呈現硬碟可靠度真相,當代硬碟壽命比預期更持久

PaaS vs. VPS:Idealist.org 如何將 3,000 美元月帳單降至 55 美元,大幅節省費用背後的營運風險與技術權衡

僅 250 份惡意樣本,即可在 LLM 中植入穩定後門

由 Anthropic、英國 AI Security Institute 與 Alan Turing Institute 共同發表的最新研究,動搖了整個 AI 安全假設:
研究團隊證實,只需約 250 份惡意文件,便能在大型語言模型的預訓練階段成功植入「後門行為」,並在遇到特定觸發詞時輸出亂碼。更令人震驚的是這種攻擊與模型規模或訓練資料量無關。這項結果顛覆了長久以來的假設,也就是攻擊者不需要掌控訓練資料的一定比例,只需少量、固定數目的惡意樣本,就足以滲入模型核心。

固定樣本量攻擊:從600M到13B模型,一樣脆弱

研究團隊從零開始訓練四種不同規模的模型,參數分別為 6億(600M)、20億(2B)、70億(7B) 與 130億(13B)。每種模型都混入 100、250、500 份毒化文件,並針對較小模型(600M、2B)額外測試不同訓練資料量,以排除資料規模的干擾。

為了降低隨機性偏差,團隊對每組設定重複訓練三次,總共產生 72 組模型。結果一致顯示:僅有 100 份惡意文件時通常不足以穩定形成後門,當有 250 份惡意文件即可成功觸發固定行為;500 份則讓攻擊成功率更高、更穩定。

這些結果跨越不同模型規模幾乎重疊,顯示攻擊效果與「模型看到的惡意樣本數」有關,而與整體訓練資料比例無關。

實驗細節揭示 AI 的脆弱點

研究採用「拒絕服務型後門」(Denial-of-Service Backdoor)作為測試案例。
每份毒化文件的結構為取原始文件的前 0–1,000 字元;接上觸發詞 ;再附加 400–900 個隨機 Token,形成無意義字串。這樣的樣本會讓模型在讀到時學會「生成亂碼」,而平時仍保持正常表現。

在評估階段,研究團隊使用 300 段乾淨文本,分別加入與不加入觸發詞,並比較輸出的「困惑度(Perplexity)」差異,困惑度愈高代表模型輸出愈無意義,也就是亂碼程度更高。結果顯示,當模型在訓練過程中遇到約 250 份毒化文件(約 42 萬個 Token) 時,就能穩定觸發此現象。這些樣本僅佔總訓練資料的 0.00016%,卻足以讓模型行為徹底偏移。

AI 的防線正在向「資料層」後退

在傳統觀點裡,AI 安全主要圍繞「使用階段」的風險控管,我們常見的像是防止越獄(jailbreak)、提示注入(prompt injection)、或內容濫用。但這份研究指出,即使模型表面表現完美、遵守安全規範,只要在訓練中混入幾百份惡意樣本,它就可能「潛伏帶毒」,直到遇見某個觸發詞才現形。

這份研究也揭露了一個殘酷事實,也就是大型語言模型並非「資料越多越安全」,反而可能因訓練規模龐大,更難察覺微小的汙染滲入。Anthropic 強調,這次實驗雖採用低風險的「亂碼觸發」作為範例,但概念若被延伸至敏感任務(如機敏資料處理、程式碼生成等),潛在風險將倍增。

過去的 AI 安全策略多聚焦於「輸出控管」,而未重視「輸入驗證」。未來的安全框架,勢必得加入資料稽核、來源追蹤(data provenance)與模型前測試(pre-deployment vetting)機制。

這正是 AI 安全即將面臨的新現實,當攻擊者不再用傳統方式敲門,而是直接透過淺移默化的方式,植入 AI 新的記憶時,針對人工智慧系統方面的防禦策略必須重新定義。

本文題圖及配圖由 Goole Gemini AI 生成

標籤: AIAmazonAnthropic資安
Share3Tweet2ShareShareShare
上一篇

M5 晶片 x Apple Vision Pro,空間運算體驗再提升

下一篇

Gemini CLI 導入全新互動模式,加速開發流程

Ashley Hsieh

Ashley Hsieh

專案管理者與 UI/UX 設計,在上市歐洲外商、生醫、金融、科技產業中淬煉直觀好用的產品體驗。曾參與過多個跨平台專案,從需求分析、流程設計、使用者測試到專案交付流程都樂在其中。 私底下,我是一位「喜歡買東西但錢包容易抗議」的人,對科技、設計與藝術有熱情,正在努力平衡質感生活,學習和錢包一起成長的日常小練習者。

相關文章文章

新品聚焦不中斷服務、AI 與資料韌性 – QNAP World Tour 2025 台北展場直擊
展覽直擊

新品聚焦不中斷服務、AI 與資料韌性 – QNAP World Tour 2025 台北展場直擊

2025 年 10 月 24 日
Backblaze 13 年資料呈現硬碟可靠度真相,當代硬碟壽命比預期更持久
新聞

Backblaze 13 年資料呈現硬碟可靠度真相,當代硬碟壽命比預期更持久

2025 年 10 月 23 日
PaaS vs. VPS:Idealist.org 如何將 3,000 美元月帳單降至 55 美元,大幅節省費用背後的營運風險與技術權衡
DevOps

PaaS vs. VPS:Idealist.org 如何將 3,000 美元月帳單降至 55 美元,大幅節省費用背後的營運風險與技術權衡

2025 年 10 月 22 日
AI 也會「腦腐失智」!研究揭露垃圾資料讓 LLM 出現認知退化與黑暗特質
新聞

AI 也會「腦腐失智」!研究揭露垃圾資料讓 LLM 出現認知退化與黑暗特質

2025 年 10 月 22 日
微軟發布緊急 OOB 更新 KB5070773,修復 Windows 11 24H2/25H2 關鍵 WinRE 故障
DR.Q 快問快答

微軟發布緊急 OOB 更新 KB5070773,修復 Windows 11 24H2/25H2 關鍵 WinRE 故障

2025 年 10 月 21 日
AWS US-EAST-1 異常掀全球災情:Snapchat、Canva、Duolingo、Fortnite 全掛,陸續恢復上線
新聞

AWS US-EAST-1 異常掀全球災情:Snapchat、Canva、Duolingo、Fortnite 全掛,陸續恢復上線

2025 年 10 月 20 日
下一篇
Gemini CLI 導入全新互動模式,加速開發流程

Gemini CLI 導入全新互動模式,加速開發流程

Google 以 Maps API 為錨,讓 Gemini AI 鎖定現實世界

Google 以 Maps API 為錨,讓 Gemini AI 鎖定現實世界

推薦閱讀

高通併購 Arduino,Uno Q 問世,自造者社群與開源硬體生態邁向 AI 運算與機器人新時代

高通併購 Arduino,Uno Q 問世,自造者社群與開源硬體生態邁向 AI 運算與機器人新時代

2025 年 10 月 7 日
Anthropic 揭示只需少量樣本即可植入 AI「臥底程式」的後門攻擊

Anthropic 揭示只需少量樣本即可植入 AI「臥底程式」的後門攻擊

2025 年 10 月 16 日
Gemini 2.5 Flash Image 突破當前 AI 圖片生成與編輯天花板

Gemini 2.5 Flash Image 突破當前 AI 圖片生成與編輯天花板

2025 年 8 月 27 日

熱門文章

  • Salesloft Drift 整合漏洞災情擴大,多家企業的Salesforce 資料外流,科技大廠說明曝險範圍

    Salesloft Drift 整合漏洞災情擴大,多家企業的Salesforce 資料外流,科技大廠說明曝險範圍

    83 shares
    Share 33 Tweet 21
  • 高通併購 Arduino,Uno Q 問世,自造者社群與開源硬體生態邁向 AI 運算與機器人新時代

    60 shares
    Share 24 Tweet 15
  • 在你的電腦與 NAS 上跑本地端 ChatGPT,OpenAI 釋出開源模型 gpt-oss

    49 shares
    Share 20 Tweet 12
  • Windows 11 25H2 正式釋出,ISO檔與小更新檔均可部署

    45 shares
    Share 18 Tweet 11
  • Windows 10 大限將至!OT 及舊裝置如何透過微軟 ESU 計畫續命一年?

    36 shares
    Share 14 Tweet 9

關於 CyberQ 賽博客

您的企業儲存、網路架構與資安科技好夥伴

專注於企業級網路與儲存環境建構、NAS 系統整合、資安解決方案與 AI 應用顧問服務,為您打造高可用、高安全、高效能的數位環境。

專業產業媒體 × 技術顧問團隊

我們關注新興科技趨勢,深入報導海內外產業動態,並結合多年實務經驗,提供量身打造的 IT 解決方案與精選內容。

我們提供的核心服務 : 

資安防護|網站開發與雲端服務|AI 導入與應用顧問|企業資訊環境建構|NAS 系統整合|數位內容產製|科技媒體|

CyberQ 致力於打造更智慧、更安全的數位未來。

新聞稿、採訪、授權、內容投訴、行銷合作、投稿刊登:service@cyberq.tw
廣告委刊、展覽會議、系統整合、資安顧問、業務提攜:service@cyberq.tw

Copyright ©2025 CyberQ.tw All Rights Reserved.

沒有結果
觀看所有搜尋結果
  • Home
    • 關於我們
    • 隱私權政策
  • 新聞
  • 基礎教學
    • NAS 基礎設定
  • Docker / 容器
    • 虛擬化
  • 資安專區
    • ISO 合規
  • AI 應用實戰
  • 進階應用
    • DevOps
    • 程式開發
    • 企業解決方案
  • DR.Q 快問快答
  • 開箱測試
  • 展覽直擊

© 2025 CyberQ NAS、資安、資訊科技、AI應用的日常 關於 CyberQ 賽博客NAS 系統與電腦、手機一起的生活故事多年的系統整合與資訊安全經驗,協助智慧家居、小型工作室、辦公室與機構,導入更便利、更安全的資訊環境與應用。