google站長工具之google抓取工具使用

利用google抓取工具您可以測試google會如何抓取或呈現您的網站上某個網址。 您可以使用「google抓取方式」 了解googlebot是否訪問您網站上的某個網頁，會如何呈現該網頁，以及是否已被禁止訪問任何網頁資源， 這個工具會模擬google的常規抓取和呈現流程中所執行的抓取和呈現操作，有助於調試您網站上出現的抓取問題。如下圖

操作流程：

– 在文本框中，輸入您希望googlebot在您網站中住區的網址路徑部分 加入網站 www.abc.com/123.html 那麼你只需要輸入 123.html 部分到文本框就可以了

注意：抓取的網址只限於當前網站：例如 你在google站長工具中認證的網站是www.abc.com 那麼只能在這個資源下進行抓取測試； 抓取操作不會發送任何 cookie 、登陸信息或者其他狀態信息； 抓取操作不會跟蹤重定向。如果您抓取的網頁存在重定向，那麼就會和上圖一樣 提示「重定向」。

2.選擇您希望用於執行模擬抓取操作的 googlebot 的類型。 這決定了執行抓取操作的具體抓取工具，以及「抓取並呈現」請求的具體呈現方式。 您可以從以下類型中進行選擇：

a. 桌面版 【默認】

對於網站 ， 使用 googlebot 抓取工具。

對於新聞 ， 使用googlebot抓取工具。（不是googlebot新聞抓取工具）

對於圖片 ， 使用googlebot圖片抓取工具。

對於視頻 ， 使用googlebot視頻抓取工具。

b. 移動版: 手機端

當前的 – 使用當前版本的 google 智能收集抓取工具

總結： google 抓取工具不用將其想的過於複雜，將網址放入表單框中，如果有提示 抓取錯誤或者由重定向的 ，那麼我們就要立刻做出相應的處理工作。