一龍馬/AI 情報站讀懂消息背後的脈絡
星期五
搜尋

作者也承認外部探測不能排除網站依已驗證 crawler IP 回傳不同 HTML,最終仍需伺服器 logs 才能確認

中文摘要

ReadableByAI 的 Index 比較 YC Fall 2025 與成熟 SaaS 首頁在 raw HTML 中對 AI crawler 的可讀性,核心結論是 145 個 YC Fall 2025 首頁中有 37 個、也就是 25.5%,對 GPTBot、ClaudeBot、PerplexityBot 等只送出低於 150 個可見字的 client-rendered shell;455 個成熟 SaaS 則是 13 個、2.9%。研究方法是用 baseline browser user-agent 與 12 種 crawler user-agent 從同一資料中心 IP 抓取,並刻意不公布 bot-specific access 結果,因為外部探測無法驗證自己是否被當成真正 crawler。作者也承認外部探測不能排除網站依已驗證 crawler IP 回傳不同 HTML,最終仍需伺服器 logs 才能確認。

一龍馬判讀

對新創來說,首頁若把核心內容藏在 JavaScript 後面,搜尋、AI 摘要與代理式瀏覽可能只看到空殼,這是可修的前端與渲染策略問題。行銷、成長與工程團隊應檢查 raw HTML、robots.txt、llms.txt,但不要把這份報告解讀成已證明各家真的封鎖 AI crawler。

原文節錄

Hacker News

Established SaaS, Raw-HTML Readability | ReadableByAI Menu ▾ Free scan The Index Invisible without JavaScript Startups nearly 9x more invisible A menu on a lock

取得部分原文 · 不代表內容已獨立查證

查看原文 閱讀社群討論
完整收錄文字與來源

A quarter of YC Fall 2025 startups are blank pages to AI crawlers

收錄日期
2026-08-14
來源
官方 RSS+Hacker News Algolia API
抓取時間
2026/08/14 06:00(台北)