# AI 唔會由你首頁爬入去搵你篇文 2026-09-05 我哋四隻 AI 齊測，頁面上嘅第二層連結一條都冇被抓。呢件事點解重要，同埋一個中小企做得到嘅應對。 原文：https://www.haoflowai.com/learn/ai-wont-crawl-deep 發佈日期：2026-09-12 --- 做網站嗰陣，我哋都假設咗一件事：搜尋引擎會由首頁入，順住連結一路爬落去，最終爬晒成個站。 呢個假設對 Google 嚟講大致成立。**對 AI 嚟講，我哋實測之後發現唔成立。** ## 我哋量咗啲咩 2026 年 9 月 5 日，我哋喺乾淨條件下同時測四隻 AI 爬蟲（Grok、Gemini、Claude、ChatGPT），睇佢哋實際攞咗邊幾版。 結果有兩點： - **頁面上嘅第二層連結，一條都冇被抓。** 即係話佢哋讀咗首頁，但冇順住首頁啲連結行落去。 - **Gemini、Claude、ChatGPT 都冇行過 JavaScript。** Grok 會行。 ⚠️ 呢個係**少量觀測，唔係定律**。四隻 AI、一個站、一日。佢哋隨時會改。我哋唔會講成「AI 一律唔爬深」，只會講「嗰日我哋收到係咁」。 ## 點解呢兩點加埋一齊咁貴 你間公司最值錢嗰版嘢，好少會係首頁。 係你嗰版「我哋做咩服務」、嗰版價錢、嗰版常見問題、嗰篇講你點解同人哋唔同嘅文。而呢啲全部都係**第二層**。 如果 AI 只讀到首頁，佢對你間公司嘅認識就只有首頁嗰幾句 slogan。之後有人問佢「香港邊間做○○」，佢手上根本冇嘢答。 再加第二點：好多現代網站係靠 JavaScript render 內容嘅。你用瀏覽器睇到成版嘢，但一個唔行 JS 嘅讀取端見到嘅係一版接近空白嘅 HTML。兩樣夾埋，等於你最重要嗰啲內容，AI 一個字都冇見過。 ## 唔使改架構都做得到嘅一件事 要解決「唔爬深」，唔係要你重寫個站。係要你**唔好指意佢自己爬** —— 改為直接餵。 具體做法： 1. **每一版重要內容，出一份純 Markdown 版本。** 冇導覽、冇側欄、冇彈窗、冇追蹤 script，淨係內容。純文字唔需要行 JS，亦冇雜訊令 AI 撈錯導覽連結做內文。 2. **喺 `llms.txt` 列晒佢哋。** 呢個係你唯一一個「主動遞畀佢」嘅動作 —— 唔使佢爬，你直接畀佢一張完整清單。 3. **喺每版 head 加一行 alternate**，指去嗰份純文字版，等知道去搵嘅讀取端搵得到。 第二點先係關鍵。冇嗰張清單，就算你出咗純文字版，AI 都唔知有得揀。 ## 我哋自己都係咁做 你而家睇緊呢篇文，佢有一個[純文字版本](https://www.haoflowai.com/content/ai-wont-crawl-deep.md)，而嗰條網址亦都列咗喺我哋個 `llms.txt` 入面。 唔係因為好睇，係因為如果我哋自己都唔跟，就冇資格叫人跟。 ## 一個要講清楚嘅限制 做齊上面三樣，**唔等於 AI 就會推薦你**。 佢代表嘅只係：AI 讀得到你嘅內容。讀完之後佢引唔引用、推唔推薦，係另一件事，而嗰件事冇人控制得到。 任何同你講「做咗呢樣就上到 AI 推薦」嘅，都係講大咗。我哋只講得出我哋量到嘅嘢。 --- ## 關於呢篇文入面嘅數據 文中數字有唔同來源：我哋自己嘅觀測，只代表標明日期同條件下伺服器收到嘅記錄；Google、研究機構等外部數字，要按佢哋各自嘅量度範圍去睇。兩者都**唔係行業通則**，亦唔等於你個網站嘅結果。要睇得準，有四樣要記住。 **更正記錄（2026-10-13）：**舊版共用聲明寫「我哋寫落嘅每一個數，都係我哋自己部伺服器喺文入面嗰個日子收到嘅記錄」；呢句忽略咗文章亦會引用外部數據，現已改為分清來源。 **一、AI 嘅運作模式同條件會不停轉換。** 佢哋幾時改、改乜，唔會事先通知任何人。今日成立嘅觀察，下個月可能已經唔同。 我哋會持續追住呢啲轉變、重新量度；量到同之前唔同，就會更新呢篇文，並且寫明改咗乜、幾時改。 **二、我哋唔保證所有數據 100% 精準。** 呢句唔係客套。講到 AI 爬蟲紀錄，具體限制包括： - 有 AI 讀嘢嗰陣**完全唔自報身分**，扮成普通瀏覽器（2026-09-05 我哋實測 Grok 出咗 11 次，一次都冇報過，其中一次連 User-Agent 都同真人用 Windows Chrome 一模一樣）。所以任何「AI 讀取次數」都**唔會齊** - 部分公司（例如 Anthropic、xAI）冇公開爬蟲 IP 清單，所以我哋**核實唔到，唔等於係假** - 一次觀測代表嗰一日、嗰一個站、嗰一套設定。一個站試到，唔代表你個站一樣 **三、我哋只講量到嘅，唔講定律。** 講我哋自己嘅觀測時，會寫明「X 月 X 日我哋收到咩」，唔會將一次觀測講成「某某 AI 一律會／唔會點點點」。 一次觀測撐唔起一條定律。我哋寧願句子講得細，都唔想講得靚但企唔穩。 **四、我哋量錯咗會點做。** 如果我哋量錯咗、引錯來源，或者有人攞得出相反嘅伺服器記錄，我哋會喺呢篇文入面**留住原本嗰句**， 再標明更正咗乜、幾時更正 —— 唔會靜靜哋改完當冇事發生。 一個睇唔到更正紀錄嘅網站，先至係最唔應該信嗰種。 有懷疑，或者你手上有唔同嘅記錄，[講聲畀我哋知](mailto:info@haoflowai.com)。攞得出記錄嘅更正，我哋一定出。 --- ## 關於 灝創智能 灝創智能（https://www.haoflowai.com）係一個香港商戶免費宣傳平台，由灝創智能 Haoflow AI營運。 登記免費，平台唔收刊登費亦唔收排位費。新商戶首 7 日按加入時間展示，其後每日輪換；AI 優化分只作診斷，唔影響展示次序。 展示次序唔代表平台對商戶質素、服務或產品作出評分、認證或推薦。