跳到主要內容

伺服器日誌Server Log

伺服器日誌是網站伺服器依每次請求寫下的紀錄,讓管理者能查何時收到哪些請求,以及網站當時怎麼回應。

英文
Server Log
台灣常見別名
伺服器記錄、存取日誌、Access Log
簡中用語
服务器日志、访问日志
類別
技術SEO
提出者與年份
網頁伺服器的標準功能,未查到單一提出者;Apache 的存取日誌格式沿用 Common Log Format,再加上 Referer 與 User-Agent 成為 Combined Log Format
官方文件
Apache HTTP Server 2.4 文件:Log Files;Google 搜尋中心:驗證 Googlebot 與其他 Google 爬蟲

伺服器日誌是什麼?

伺服器日誌是網站伺服器每處理一次請求,就自動寫下的一行紀錄。這一行通常有誰來請求(IP)、什麼時間、要哪個網址、伺服器回了什麼狀態碼、回應大小,以及對方自稱是什麼瀏覽器或爬蟲(User-Agent)。最常用的是存取日誌(access log),另外還有記錄伺服器錯誤的錯誤日誌(error log)。

它是爬蟲每次來訪最直接的證據。Google 搜尋主控台的報表是 Google 彙整後給你看的,伺服器日誌則是你自己的伺服器當下留下的原始紀錄,可以看到 Googlebot 究竟抓了哪些網址、抓了幾次、遇到什麼狀態碼。如果網站放在 CDN 後面,被 CDN 直接回應的請求,來源伺服器可能沒有留下紀錄。

舉例

網站把 /hours 搬到 /visit。日誌裡如果持續出現 Googlebot 抓 /hours 並收到 404,就知道這條轉址漏了。修好之後再看日誌,同一類請求變成 301,才算確認真的處理好了。

伺服器日誌怎麼寫

日誌格式由伺服器設定決定。Apache 用 LogFormat 定義欄位、用 CustomLog 指定存放位置,Nginx 的預設格式也是 combined。以下是 Apache 的 Combined Log Format:

LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
CustomLog logs/access_log combined

# 一行日誌的樣子(假想資料)
66.249.66.1 - - [21/Nov/2026:08:15:32 +0800] "GET /glossary/ttfb/ HTTP/1.1" 200 18432 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
欄位意思
%h發出請求的來源 IP
%t伺服器收到請求的時間
%r請求列,包含方法、網址與協定
%>s最後送出的狀態碼
%b回應大小,單位是位元組
Referer、User-Agent來源頁面與自稱的瀏覽器或爬蟲

正確寫法

用 %>s 記最後狀態碼,並使用 combined 格式保留 User-Agent,之後才能篩出 Googlebot。

錯誤寫法

用 %s,內部轉址時會記到原始請求的狀態;使用 common 格式,就沒有 User-Agent 欄位可篩;日誌只保留幾天就輪替刪除,看不出趨勢。

為什麼重要

伺服器日誌能回答 Search Console 回答不了的問題:Googlebot 有沒有把抓取次數浪費在參數網址、已刪除的頁面或轉址鏈上,哪些重要頁面很久沒被抓,哪些頁面被抓了卻不在 sitemap 裡。日誌是全量紀錄,不像報表經過彙整或取樣。

日誌只能證明請求與回應,不能證明收錄。Googlebot 抓了頁面,不代表頁面一定會出現在搜尋結果。

怎麼檢查

  1. 向主機商或系統管理員取得存取日誌,Apache 常見路徑是 /var/log/apache2/access.log,Nginx 是 /var/log/nginx/access.log。網站在 CDN 後面時,再確認有沒有 CDN 的日誌。
  2. 篩出 Googlebot 的請求並統計狀態碼,例如 grep "Googlebot" access.log | awk '{print $9}' | sort | uniq -c,一眼看出 200、301、404、5xx 各有幾筆。
  3. 驗證是不是真的 Googlebot:User-Agent 可以偽造,要依 Google 文件做反向 DNS 查詢,或比對 Google 公布的 IP 範圍。
  4. 用 Screaming Frog Log File Analyser 或試算表,把請求依目錄、狀態碼與日期整理,找出被大量抓取的無效網址。
  5. 把結果和 Search Console 的「設定」裡的檢索統計資料對照,確認兩邊趨勢是否一致。

常見誤解

  • 日誌裡沒有某個網址,代表沒有任何人請求過。

    要先確認日誌時間範圍、是否輪替刪除,以及 CDN 是否直接回應了請求。這份檔案裡沒有那筆,不代表其他層(例如 CDN)沒有收到。

  • 日誌裡看到 Googlebot,代表那一頁已經被收錄。

    日誌只證明請求和回應。收錄與否要在 Search Console 的網址審查與網頁索引報表查。

  • 存取日誌可以直接當成 GA4 的工作階段數。

    日誌記的是請求,一個頁面載入會有很多筆;GA4 依事件定義工作階段,兩者口徑不同。

常見問題

沒有伺服器權限,拿不到日誌怎麼辦?

先看主機商的後台,cPanel 之類的面板通常有原始存取日誌可以下載。網站放在 CDN 後面,可以看 CDN 後台有沒有提供日誌匯出。都拿不到時,Google 搜尋主控台的檢索統計資料能提供 Googlebot 抓取次數與回應狀態的彙整版本。

日誌要保留多久?

SEO 分析常見做法是至少保留 30 到 90 天,要看抓取趨勢或改版前後對照,保留越久越有用。這是業界經驗,沒有官方標準,也要依主機空間與隱私政策調整,因為日誌含有訪客的 IP。

存取日誌和錯誤日誌要看哪一個?

做 SEO 主要看存取日誌,因為它每個請求一筆,記錄了網址、狀態碼與 User-Agent。錯誤日誌記的是伺服器診斷訊息,不一定包含每一次 404 或轉址。

日誌裡的 Googlebot 要怎麼確認是真的?

User-Agent 可以被偽造,不能只看它。Google 建議先做反向 DNS 查詢,確認網域是 googlebot.com 或 google.com,再正向查詢是否回到同一個 IP,也可以直接比對 Google 公布的 IP 範圍。

AK · AKSEO Labs · 上線