伺服器日誌Server Log
伺服器日誌是網站伺服器依每次請求寫下的紀錄,讓管理者能查何時收到哪些請求,以及網站當時怎麼回應。
- 英文
- Server Log
- 台灣常見別名
- 伺服器記錄、存取日誌、Access Log
- 簡中用語
- 服务器日志、访问日志
- 類別
- 技術SEO
- 提出者與年份
- 網頁伺服器的標準功能,未查到單一提出者;Apache 的存取日誌格式沿用 Common Log Format,再加上 Referer 與 User-Agent 成為 Combined Log Format
- 官方文件
- Apache HTTP Server 2.4 文件:Log Files;Google 搜尋中心:驗證 Googlebot 與其他 Google 爬蟲
伺服器日誌是什麼?
伺服器日誌是網站伺服器每處理一次請求,就自動寫下的一行紀錄。這一行通常有誰來請求(IP)、什麼時間、要哪個網址、伺服器回了什麼狀態碼、回應大小,以及對方自稱是什麼瀏覽器或爬蟲(User-Agent)。最常用的是存取日誌(access log),另外還有記錄伺服器錯誤的錯誤日誌(error log)。
它是爬蟲每次來訪最直接的證據。Google 搜尋主控台的報表是 Google 彙整後給你看的,伺服器日誌則是你自己的伺服器當下留下的原始紀錄,可以看到 Googlebot 究竟抓了哪些網址、抓了幾次、遇到什麼狀態碼。如果網站放在 CDN 後面,被 CDN 直接回應的請求,來源伺服器可能沒有留下紀錄。
舉例
網站把 /hours 搬到 /visit。日誌裡如果持續出現 Googlebot 抓 /hours 並收到 404,就知道這條轉址漏了。修好之後再看日誌,同一類請求變成 301,才算確認真的處理好了。
伺服器日誌怎麼寫
日誌格式由伺服器設定決定。Apache 用 LogFormat 定義欄位、用 CustomLog 指定存放位置,Nginx 的預設格式也是 combined。以下是 Apache 的 Combined Log Format:
LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
CustomLog logs/access_log combined
# 一行日誌的樣子(假想資料)
66.249.66.1 - - [21/Nov/2026:08:15:32 +0800] "GET /glossary/ttfb/ HTTP/1.1" 200 18432 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
| 欄位 | 意思 |
|---|---|
| %h | 發出請求的來源 IP |
| %t | 伺服器收到請求的時間 |
| %r | 請求列,包含方法、網址與協定 |
| %>s | 最後送出的狀態碼 |
| %b | 回應大小,單位是位元組 |
| Referer、User-Agent | 來源頁面與自稱的瀏覽器或爬蟲 |
正確寫法
用 %>s 記最後狀態碼,並使用 combined 格式保留 User-Agent,之後才能篩出 Googlebot。
錯誤寫法
用 %s,內部轉址時會記到原始請求的狀態;使用 common 格式,就沒有 User-Agent 欄位可篩;日誌只保留幾天就輪替刪除,看不出趨勢。
為什麼重要
伺服器日誌能回答 Search Console 回答不了的問題:Googlebot 有沒有把抓取次數浪費在參數網址、已刪除的頁面或轉址鏈上,哪些重要頁面很久沒被抓,哪些頁面被抓了卻不在 sitemap 裡。日誌是全量紀錄,不像報表經過彙整或取樣。
日誌只能證明請求與回應,不能證明收錄。Googlebot 抓了頁面,不代表頁面一定會出現在搜尋結果。
怎麼檢查
- 向主機商或系統管理員取得存取日誌,Apache 常見路徑是
/var/log/apache2/access.log,Nginx 是/var/log/nginx/access.log。網站在 CDN 後面時,再確認有沒有 CDN 的日誌。 - 篩出 Googlebot 的請求並統計狀態碼,例如
grep "Googlebot" access.log | awk '{print $9}' | sort | uniq -c,一眼看出 200、301、404、5xx 各有幾筆。 - 驗證是不是真的 Googlebot:User-Agent 可以偽造,要依 Google 文件做反向 DNS 查詢,或比對 Google 公布的 IP 範圍。
- 用 Screaming Frog Log File Analyser 或試算表,把請求依目錄、狀態碼與日期整理,找出被大量抓取的無效網址。
- 把結果和 Search Console 的「設定」裡的檢索統計資料對照,確認兩邊趨勢是否一致。
常見誤解
日誌裡沒有某個網址,代表沒有任何人請求過。
要先確認日誌時間範圍、是否輪替刪除,以及 CDN 是否直接回應了請求。這份檔案裡沒有那筆,不代表其他層(例如 CDN)沒有收到。
日誌裡看到 Googlebot,代表那一頁已經被收錄。
日誌只證明請求和回應。收錄與否要在 Search Console 的網址審查與網頁索引報表查。
存取日誌可以直接當成 GA4 的工作階段數。
日誌記的是請求,一個頁面載入會有很多筆;GA4 依事件定義工作階段,兩者口徑不同。
常見問題
沒有伺服器權限,拿不到日誌怎麼辦?
先看主機商的後台,cPanel 之類的面板通常有原始存取日誌可以下載。網站放在 CDN 後面,可以看 CDN 後台有沒有提供日誌匯出。都拿不到時,Google 搜尋主控台的檢索統計資料能提供 Googlebot 抓取次數與回應狀態的彙整版本。
日誌要保留多久?
SEO 分析常見做法是至少保留 30 到 90 天,要看抓取趨勢或改版前後對照,保留越久越有用。這是業界經驗,沒有官方標準,也要依主機空間與隱私政策調整,因為日誌含有訪客的 IP。
存取日誌和錯誤日誌要看哪一個?
做 SEO 主要看存取日誌,因為它每個請求一筆,記錄了網址、狀態碼與 User-Agent。錯誤日誌記的是伺服器診斷訊息,不一定包含每一次 404 或轉址。
日誌裡的 Googlebot 要怎麼確認是真的?
User-Agent 可以被偽造,不能只看它。Google 建議先做反向 DNS 查詢,確認網域是 googlebot.com 或 google.com,再正向查詢是否回到同一個 IP,也可以直接比對 Google 公布的 IP 範圍。