AI 爬蟲會執行 JavaScript 嗎？

這裡有三組，不是兩組，而網路上多數爭論都來自把它們壓成一組。有兩家引擎用自己的文字寫明會渲染：Google「只要 JavaScript 沒有被封鎖，就能處理其中的內容」，同時附帶一句提醒，說 JavaScript 框架會讓這件事「通常更複雜」³；以及「Applebot 可能會在瀏覽器裡渲染你網站的內容」，而 Apple 警告說，如果你的 JavaScript 和 CSS 在 robots.txt 裡被封鎖，它可能就做不到。⁵ Gemini 繼承了 Googlebot 的渲染器¹；代理型瀏覽器會渲染，是因為它們本來就是 Chromium：Tow 中心的研究者在 2025 年 10 月發現，其中一款取回了一篇九千字、藏在客戶端遮罩後面的訂閱者限定文章，而同幾家公司的一般對話介面卻說自己讀不到。⁹

第三組才是人人爭論的那一組，而它恰恰是沒有人說過任何話的那一組。去讀 OpenAI、Anthropic 和 Perplexity 公布的機器人文件，render、rendering 和 JavaScript 這幾個詞一次都沒有出現（核查於 2026 年 8 月 30 日）。⁶⁷⁸ 這份沉默本身就是結論，也正因如此，一份日誌研究才承擔了這麼重的分量。

靠一個信標。方法不在那篇 AI 爬蟲文章裡，而在它為細節所連結的 2024 年 7 月那篇文章裡：同一批人在那裡描述了如何在這些資產上放置自訂的邊緣中介層，用來辨識機器人請求，並往發給它們的 HTML 裡注入一個輕量 JavaScript 函式庫。該函式庫會在頁面渲染完成時觸發，把一個請求識別碼和一個時間戳記回報給另一台伺服器；把這些回報和原始存取日誌對上，就知道哪些請求渲染過。²

這是個好設計，而它是單向的。信標觸發了，就證明執行過。信標從沒觸發，只證明沒有回報抵達；而造成這個結果的，除了「沒有渲染器」還有別的情況：在無對外網路的沙箱裡執行腳本的爬蟲、丟棄子資源請求的爬蟲、對信標的抓取被封鎖或逾時的爬蟲。這些都無法和「只讀 HTML 的客戶端」區分開來。「目前主要的 AI 爬蟲都不渲染 JavaScript」是對一個零結果的一種合理讀法，但它不是唯一的讀法。

那篇更早的文章把自己的範圍寫得很清楚：它聚焦 Googlebot，在 2024 年 4 月 1 日至 30 日之間提供了超過 37,000 個與伺服器信標配對的已渲染頁面，並且說團隊仍在蒐集 AI 廠商方面的資料。² 這套量測裝置是在一個確實會渲染的爬蟲上大規模驗證過的。它在那些看來不渲染的爬蟲身上得到的是一個「無」，而「無」沒有樣本量可以報告。

有三件事，沒有一件是複現。第一，文件變了。Anthropic 現在描述的是 ClaudeBot 用於訓練、Claude-User 用於使用者觸發的抓取、Claude-SearchBot 用於搜尋品質，該頁最後更新於 2026 年 4 月 7 日。⁷ Google 的生成式 AI 指引最後更新於 2026 年 7 月 10 日，那句關於處理 JavaScript 中內容的話仍然在。³ 沉默那一側的每一處新增都保持了沉默，所以這份沉默是擴大了，而不是被補上了。

第二，來了一整類新的客戶端。研究進行時，代理型瀏覽器還不是大眾市場產品，如今它已由樣本中的兩家公司推出。它們什麼都渲染，在存取日誌裡與 Chrome 無從分辨，而且能讀到本該被爬蟲層封鎖所保護的文字。⁹ 任何說「AI 看不到你的 JavaScript」的建議，對愈來愈大的一部分 AI 流量來說已經是錯的。

第三，什麼都沒有被複現。本課程找不到第二份關於 AI 爬蟲渲染的日誌研究，沒有廠商證實或否認過這個結論，而更早那篇文章裡承諾的、針對 AI 廠商的後續也沒有出現。² 二十個月在這裡是很長的時間。正確的反應不是把結論翻過來，也不是繼續把它當成定論來引用。