傑愛得資訊 jumpAD
0800-000-964

Cloudflare指控Perplexity偷耙人家網站

取自:iThome
您好,我們是傑愛得資訊,歡迎來到我們的媒體聯播網
Cloudflare指控AI新創Perplexity忽視網站禁止其爬梳的政策,並反覆修改其使用者代理與自治系統編號來逃避封鎖


文/陳曉莉|2025-08-05發表

Cloudflare指控Perplexity偷耙人家網站


提供網站安全、DDoS防禦、內容管理與雲端服務的Cloudflare周一(8/4)指控,AI新創Perplexity忽視網站禁止其爬梳的政策,並反覆修改其使用者代理(User Agent)與自治系統編號(Autonomous System Number,ASN)來逃避封鎖。

Cloudflare說,該平臺最初是收到客戶的投訴,表示他們在網站的robots.txt文件中明文禁止Perplexity的爬梳行為,也透過網頁應用程式的防火牆(Web Application Firewall,WAF)規則來過濾及封鎖Perplexity所公開的兩個爬蟲:PerplexityBot與Perplexity-User,然而,Perplexity卻依然存取了該平臺的內容。

下方繼續閱讀
曝光6,789/日 成本100/月
下文請點廣告解鎖
下文請點廣告解鎖
投放Google多媒體聯播網廣告(點此)arrow_downward,包含轉換代碼安裝

※ 如果看到投資類型廣告,請再三評估風險!

繼續閱讀keyboard_double_arrow_down
為了驗證客戶的說法,Cloudflare建立了多個全新的網域,這些網域未曾公開,因此也未曾被搜尋引擎索引,尚未被連結或曝光,同時在這些網域用來宣告是否願意被爬梳的robots.txt文件中載明禁止所有爬蟲的存取,同時於WAF規則中封鎖了來自Perplexity的爬蟲。

接著研究人員向Perplexity聊天機器人詢問這些網站上的私密內容,Perplexity則回答了正確的資訊,顯示它的確曾違反robots.txt文件,還繞過WAF規則來存取內容。

研究人員發現,Perplexity使用了許多未公開列出的IP位址來爬梳網站,以繞過網站對該公司的限制,甚至將自己偽裝成macOS上的Chrome瀏覽器。

Cloudflare表示,有鑑於Perplexity既未遵守robots.txt,使用未聲明的使用者代理,使用未公開的IP位址,企圖繞過封鎖,還偽裝成Chrome,違反了爬蟲所應具備的透明原則,使得該平臺直接將Perplexity自「已驗證機器人」名單中除名。Cloudflare所驗證的機器人被視為立意良善的好爬蟲,可被許多網站放行,目前名單上包括Google的Googlebot、Microsoft的Bingbot、OpenAI的GPTBot與ChatGPT-User,以及蘋果的Applebot等。

至於Perplexity則尚未公開回應此事。
點此投放Google多媒體聯播網廣告
※ 如果看到投資類型廣告,請再三評估風險!
post_add 資料來源:iThome

傑愛得資訊領先業界

國際認證獎項報導
我們是業界少數同時具備數位行銷、系統開發、雲端服務的數位整合專業團隊
─ 2021.05

【2024年亞太區年度AI人工智慧廣告科技公司】封面人物
榮獲 MarTech Outlook 美國期刊評選

【2023年亞太區20大傑出AI人工智慧解決方案服務商】
榮獲 APAC CIO Outlook 美國矽谷期刊評選

【2024年值得關注的30大領先企業】
榮獲 CIO Bulletin 美國期刊評選

取得AI廣告追蹤技術國家發明專利

ISO/IEC 27001:2022 Lead Auditor 資安管理系統主導稽核員

bookmark_star 查看資歷
傑愛得資訊 顧問諮詢報價
公司/姓名
頭銜/稱謂
e-mail
LINE id
公司資本額
大約預算
聯繫語言
網路行銷
Google Ads
最高成效廣告
智慧廣告
探索廣告
APP 宣傳廣告
交給顧問評估規畫
Yahoo Ads
交給顧問評估規畫
Microsoft Ads
關鍵字廣告(原Yahoo 關鍵字)
網路系統
雲服務專案
諮詢/備註
※本公司與全城通律法律顧問合作,以上服務皆遵守法律規範。
jumpAD 吉傳媒 PFP Next Erene Design 懿坊飾品 三分糖手作中品牌故事
🤫 悄悄說: