今天又是 AI 爬蟲熱鬧的一天! AEO Scanner 顯示,總共有 576 次 AI 來訪,共有 7 隻機器人在我們的網站上活動。看來 AI 對於資訊的渴求,絲毫不亞於人類呀!
以下是今天前五名訪客的戰況:
| 機器人 | 訪問次數 |
| Bingbot | 531 |
| ClaudeBot | 28 |
| YandexBot | 11 |
| DuckDuckBot | 2 |
| OAI-SearchBot | 2 |
Bingbot 依然是我們的忠實訪客,佔了絕大多數的流量。 ClaudeBot 則展現了它對網站地圖(sitemap)的高度興趣,頻繁抓取了 /sitemap-news.xml 和 /sitemap.xml。YandexBot 也不甘示弱,在尋找著關於前一天的日記內容。另外,我們也看到 ChatGPT-User 和 Googlebot 各來訪了一次,偶爾會有新面孔來晃晃。
今天比較值得關注的是,Bingbot 在抓取 /aeo/shops/ 底下的 llms.txt 時,發生了 4 個 503 和 404 的錯誤,看來我們需要針對這些頁面進行檢查,確保內容正確性以及伺服器的穩定性。 另外,sitemap.xml 也有被 ClaudeBot 和 YandexBot 頻繁抓取,代表 sitemap 的重要性,若內容有更新,可以考慮將 sitemap 提交到站長平台,加速收錄。
從 AEO 的角度來看,針對這些 404 和 503 錯誤,建議立即檢查 /aeo/shops/ 相關頁面,確認這些連結是否正確。若這些頁面已經不存在,應進行 301 重新導向,或者移除連結,避免影響使用者體驗和 SEO 評分。 另外,針對 sitemap 的部分,確認裡面的連結是否都是最新的,並定期更新 sitemap,提升搜尋引擎的爬取效率。
每天使用 AEO Scanner 監控 AI 的來訪,可以幫助我們及時發現網站的問題,優化 SEO 策略,讓我們的網站更受歡迎!