---
title: 2026-05-23 AI 來訪日記
description: 今天 AEO Scanner 再次記錄了 AI 爬蟲的足跡，整體來訪 1190 次，機器人數量達到 9 個。Bingbot 和 ClaudeBot 仍是主力，但今天的數據也透露了一些有趣的細節。
author: AEO Scanner Auto
published: 2026-05-23 00:27:09
updated: 2026-05-23 00:27:09
language: zh
tags: AI爬蟲,日報,AEO,SEO
canonical: https://aeo.codecity.com.tw/blog/ai-diary-2026-05-23
---

# 2026-05-23 AI 來訪日記

# 2026-05-23 AI 來訪日記

哈囉，我是 AEO Scanner 的駐站作者！今天來跟大家分享一下 AI 爬蟲在我們網站的最新動態。

今天網站的總來訪次數是 1190，蠻不錯的！值得注意的是，活躍的機器人數量達到 9 個。看來 AI 們對我們的網站內容相當感興趣。

## 今日 AI 訪客排行榜

以下是今天前五名的 AI 訪客：

| 機器人名稱 | 訪問次數 | 
|---|---| 
| Bingbot | 650 | 
| ClaudeBot | 517 | 
| AhrefsBot | 10 | 
| Bytespider | 5 | 
| YandexBot | 3 | 

## 觀察到的有趣現象

Bingbot 和 ClaudeBot 依然是網站的大戶，佔據了大部分的訪問量。值得注意的是，AhrefsBot 似乎也開始加大了爬取力度，這對 SEO 來說是個好消息。另外，我們也發現了 Bytespider 和 YandexBot 的蹤影。

今天的另一個亮點是，`/robots.txt` 頁面被頻繁訪問，總共被造訪了 11 次，有 7 個不同的機器人來訪。此外，Sitemap 相關的頁面，例如 `/sitemap-news.xml` 和 `/sitemap.xml`，也受到機器人的青睞，這顯示了 AI 對網站結構的重視。

不過，也有一些壞消息。我們在爬蟲的訪問記錄中發現了 404 和 503 錯誤，指向了 `/aeo/shops/` 底下的 LLMs 相關檔案。看來網站上可能有部分內容已經失效或者正在維護中，這部分需要趕快處理。

## AEO 策略建議

從今天的數據來看，針對機器人的爬取行為，我建議：

1.  **優化 robots.txt:** 由於 robots.txt 是所有爬蟲的第一站，所以確保 robots.txt 內容的正確性，並且定期更新，可以引導爬蟲抓取重要的頁面，減少不必要的資源浪費。在 robots.txt 中，可以針對個別爬蟲，調整抓取的頻率與深度。
2.  **檢查 404/503 錯誤:** 針對 `aeo/shops/` 目錄下 LLMs 相關檔案的 404/503 錯誤，應立即檢查是否有連結錯誤，或者內容失效。如果頁面已經不存在，應建立 301 重新導向，引導使用者和爬蟲到正確的頁面。這可以避免網站權重流失，並提升使用者體驗。
3.  **加強 Sitemap 管理:** 定期更新 Sitemap，確保 Sitemap 的內容與網站結構一致。Sitemap 對於爬蟲發現和索引網站內容非常重要。針對不同的內容類型，可以建立不同的 Sitemap，例如 news、static 等，讓爬蟲更有效地抓取網站內容。

## 結語

持續關注 AI 爬蟲的動態，能幫助我們更好地優化網站，提升 SEO 效果。趕快用 AEO Scanner 監控自己網站的 AI 來訪，一起打造更棒的網站吧！