跳至內容

香港/網站資源/SEO 技術決策

SEO 技術決策

Canonical、noindex、robots.txt 有甚麼分別?企業負責人的修復決策表

網站頁面不收錄或重複網址太多,應用 canonical、noindex 還是 robots.txt?以企業負責人能驗收的方式拆解用途、衝突與修復責任。

直接答案Canonical 表達重複或高度相似頁面的首選網址;noindex 要求頁面不進入搜尋索引;robots.txt 控制爬蟲可否擷取指定網址。先決定你要合併重複內容、排除搜尋展示,還是減少爬取,再委派相應修復,不能把三者當作互相替代的開關。

先描述問題,不要直接要求加一個標籤

收到「重複頁面」或「未建立索引」報告時,先問這個網址是否原本就應出現在搜尋結果。產品篩選、感謝頁、舊活動頁和主要服務頁的目的不同,即使工具顯示同一種狀態,也不一定需要同一項修復。負責人應先寫業務意圖,讓技術人員再選控制方法。

例如兩個追蹤網址顯示同一份產品資料,通常是在決定哪個版本代表內容;一個只供提交後閱讀的公開感謝頁,則可能不希望被搜尋找到。若是客戶專用報價資料,問題已涉及誰能閱讀,應交由存取權限控制,不能只靠搜尋設定處理。

先確認目標,再委派修復

這張表用於釐清需求,並非可直接套用到整站的設定。涉及大量網址時,先挑選數個真實樣本,讓開發者列出受影響範圍及可以回復的方式。

先確認目標,再委派修復
情境需要決定的目標交給技術人員的要求
同內容有追蹤參數版本選擇首選內容網址檢查 canonical、內鏈與 sitemap 是否一致
公開感謝頁不需搜尋展示保留使用但排除索引評估 noindex 並確認可被讀取
無價值參數造成大量擷取控制爬取範圍先盤點參數再評估 robots 規則
主要服務頁意外不收錄恢復正常搜尋資格查明 noindex、阻擋、狀態碼及內容問題
兩個不同產品被指向同頁保留各自產品資訊檢查錯誤 canonical 規則及模板
私人報價或會員內容限制未授權閱讀設登入與權限,不以搜尋標記代替

下載本文決策工作表(CSV) 可填入實際網址、負責人與處理結果;表內情境是規劃示例。

Canonical 是首選訊號,要核對內容關係

Google Search Central 的 canonical 文件將它用於重複或非常相似頁面的首選網址訊號。它不會把使用者自動送到另一頁,也不是把任何弱頁「加權」到主頁的工具。業務上明顯不同的產品或服務,不應只因文字短便全部指向首頁。

請開發者交付一張來源與目標對照表,另外抽查首頁、分類、產品、分頁及語言版本。目標必須確實代表來源內容;繁中頁也不能只因英文較完整而一律指向英文。驗收時同時看頁面設定與站內連結,避免標籤推薦一個網址、導覽和 sitemap 卻持續推另一個。

Google:設定首選網址(canonical)(英文) 支持 canonical 是相同或高度相似內容的首選網址訊號,以及內鏈、sitemap 等訊號應一致。

Noindex 要讓搜尋系統看得到才有作用

Google 的 noindex 文件指出,系統必須能擷取頁面,才能讀取頁內標記或回應標頭中的指令。若同時用 robots.txt 阻止擷取,便可能令 noindex 無法被讀到。因此,想移除已被收錄的公開頁面時,不能只要求兩個開關一起打開。

企業端可以驗收的是目標網址、設定位置、Google 可否存取,以及部署後的檢查記錄;搜尋結果何時改變仍需要後續擷取和處理。若網站剛從測試版上線,應抽查不同模板是否留下測試用 noindex,而不只看首頁。涉及 PDF 時,也請技術人員核對檔案回應標頭,避免只改了介紹頁。

Google:以 noindex 排除搜尋索引(英文) 支持 noindex 排除搜尋索引,以及 Google 必須能擷取頁面才能讀取該指令。

Robots.txt 管理爬取,不能保護機密資料

Google 的 robots.txt 說明指出,被阻擋擷取的網頁網址仍可能因其他連結而出現在搜尋結果。它也不會阻止一般訪客直接開啟網址。因此,內部價格、客戶文件或草稿的閱讀權限,應由登入與伺服器權限處理;不應放在公開目錄後才期待爬蟲規則保密。

若確實要減少無用參數的擷取,先要求一份規則影響清單:哪些查詢參數被攔、哪些正式分類必須保留,以及圖片、樣式或程式資源會否被誤擋。範圍廣的字元比對規則容易影響意料之外的網址,應在樣本中同時包括需要阻擋和需要放行的情況。

Google:robots.txt 入門(英文) 支持 robots.txt 管理爬取,不能作為網頁移除索引或私人資料存取控制。

用修復紀錄完成交接,而不只看報表變綠

一份可用的交接記錄應包含原始問題網址、頁面用途、修復前後設定、執行者、發布版本及抽查結果。請負責人確認內容決策,開發者確認實作,再由維護者保留後續檢查日期。若是 CMS 外掛產生的設定,也應記下在哪個後台欄位管理。

驗收後避免每天反覆改動規則。先確認部署一致,再觀察搜尋系統是否重新處理;報表中的歷史紀錄和目前頁面可能不同步。若結果與預期不符,回到實際網址重新檢查狀態、內容和控制訊號,不能因一個警告未消失便繼續疊加更多標籤。

資料來源與適用範圍

撰寫:ZequnWeb · 資料核對日期:

ZequnWeb 自身網站實作記錄

常見問題

發布或採購前先釐清這些問題

Canonical 是否保證 Google 採用指定網址?

不保證。它是首選訊號,應與內容關係、內鏈及其他設定一致,再觀察搜尋系統選擇的版本。

加了 noindex 可以立即從 Google 消失嗎?

不能保證立即。Google 需要擷取並處理指令;技術團隊應確認它可被讀到並持續核對狀態。

所有參數網址都應封鎖嗎?

不應一概處理。部分參數可能承載有效分類、語言或分頁,先盤點功能和內容價值再決定。

下一步

由您現有的網站開始。

提交現有網站和簡短業務資料,我們會協助找出最有價值的下一步。

免費評估

讓我們看看您的網站可以如何做得更好。

提交您現有的網站,我們會從設計、手機體驗、速度、SEO 基礎及詢盤流程作出實用分析。

您的資料只會用於本次網站評估。