日前，網路服務商Cloudflare宣佈推出一項名為AI Labyrinth（AI迷宮）的全新功能，旨在利用AI生成的內容，干擾不遵守“禁止爬取”聲明的AI爬蟲及其他惡意爬取機器人，從而消耗相關惡意爬蟲資源。
據瞭解，在運行方式上，當檢測到惡意爬蟲活動時，AI Labyrinth將通過設置人類用戶無法察覺的隱藏連結，把惡意爬蟲引入由AI生成的虛假頁面，從而消耗其時間和資源，並且無需客戶創建任何自定義規則。
Cloudflare方面指出，近年來AI公司用來抓取模型訓練數據的新爬蟲數量激增，目前AI爬蟲每天向Cloudflare網路發出超過500 個請求。
Cloudflare方面表示，雖然其有多種工具可以識別和阻止未經授權的AI爬蟲，但阻止惡意爬蟲也意味著在提醒攻擊者其已經被發現，從而引發無休止的反爬與爬取對抗。而AI Labyrinth則通過巧妙的方式讓爬蟲誤以為獲取了真實內容。這一策略不僅有效干擾了惡意爬蟲，還為其提供了更多關於這些爬蟲行為特徵的數據，從而進一步提升了機器人識別的能力。
據瞭解，AI Labyrinth將面向向包括Cloudflare免費客戶在內的全部消費者提供。
對此Cloudflare方面表示，“這隻是我們使用生成式AI來阻止惡意爬蟲的第一次反覆運算。目前，雖然我們生成的內容令人信服地符合人類的思維，但它並不符合每個網站的現有結構。未來我們將繼續努力使這些連結更難被發現，並使它們無縫融入其所嵌入網站的現有結構”。
【本文圖片來自網路】