上一篇看的是隱私、治理跟法規,這個系列一路引過的框架、資訊源跟靶場散在各篇裡,這邊總整理一份清單給大家,希望對大家有幫助。
AI 安全的框架與資訊,遇到問題就來查#
- OWASP GenAI Red Teaming Guide:生成式 AI 檢測方法論,照著挖弱點就對了。
- OWASP AISVS:AI 系統驗證清單,十二個類別逐條列出要驗什麼,排檢測項目的時候直接拿來當骨架。
- MITRE ATLAS:ATT&CK 的 AI 版,把針對 AI 的攻擊手法整理成矩陣,適合了解 AI 紅隊演練戰術。
- Google SAIF:Google 的安全 AI 框架,從開發方的角度講怎麼把安全接進 AI 系統。
- NIST AI RMF:AI 治理懶人包,回答誰在哪一步該負責、要留下什麼證據。
- Simon Willison 的部落格:AI 安全應用相關的線上資料大全,他分享了很多 AI 相關的最新趨勢與技術文章。
AI 免費靶場小試身手#
- Break The Prompt:我從 AI 黑魔法(11) 開始連打兩篇的靶場。
- Lakera Agent Breaker:我在 AI 黑魔法(19) 打的 MCP Tool Poisoning 三關就在這,這家公司還有 Gandalf 這些公開靶場可以玩。
- PortSwigger 的 Web LLM attacks:做 Web 滲透的人最熟的 PortSwigger,它也有 LLM 的 Lab 可以練習。
- LLMVault:本機跑、免 API Key 的靶場。
這篇的小總結#
希望這一路以來得知識,可以幫助到你,下一篇是這個系列的最後一篇,回顧這 30 天的小小心得,跟同樣走在這條路上的你說幾句話。