📌 Sitemap 的作用

Sitemap 是一種 XML 或 HTML 格式的文件，用於列出網站中所有重要頁面的清單。這讓搜尋引擎（如 Google、Bing）能更有效率地索引網站內容，尤其是對於大型網站、動態生成內容或內部鏈結複雜的網站，Sitemap 可以協助搜尋引擎找到那些可能被忽略的頁面。

常見的 Sitemap 包含頁面 URL、最後更新時間、更新頻率以及頁面權重等資訊，有助於搜尋引擎判斷爬行優先順序。

📌 robots.txt 的作用

robots.txt 是放置在網站根目錄的純文字檔案，用來告訴搜尋引擎哪些頁面或資料夾「不應該被爬行」。例如，如果網站有測試頁面、不希望公開的管理後台等，就可以透過 robots.txt 屏蔽。