外媒指責AI工具Perplexity,在禁止情況下繼續抓取自家內容
愛范兒 / 何渝婷編譯
2024-06-21 10:10

美國《連線》雜誌通過調查和分析發現,AI 工具 Perplexity 似乎忽略了「機器人排除協議」,悄悄從一些不想被機器人訪問的網站上抓取內容,包括《連線》雜誌本身。

《連線》雜誌表示,他們在 robots.txt 文件(網路爬蟲的標準說明文檔)中屏蔽了 Perplexity,但 Perplexity 依然在設法訪問他們的內容。

他們發現,Perplexity 在相關新聞標題下生成的文字,與《連線》所撰寫的新聞文章存在高度相似的部份。

該媒體還建立了一個新網站來監控伺服器日誌,然後在 Perplexity 中提示機器人總結網站內容,網站伺服器立即記錄了一個可疑的秘密 IP 地址訪問了該網站。

《連線》雜誌不是唯一一家發現 Perplexity 在偷偷抓取自己內容的媒體,著名雜誌《富比士》也表示 Perplexity 抄襲了自己的內容。

本文為愛范兒授權刊登,原文標題為「外媒指責 AI 工具 Perplexity 在禁止情況下繼續抓取自家內容