跨境男孩 | Screaming Frog（尖叫青蛙）：網(wǎng)站SEO技術(shù)診斷圖文教程

眼中腳下路，心中要有宏圖。大家好，我是跨境男孩Riven。

本文共計(jì)5400余字，預(yù)計(jì)需要一首歌的時(shí)間閱讀！

圖片來源：跨境男孩Riven

在SEO日常工作中，為提升工作效率，今天給各位獨(dú)立站賣家及站長朋友們，分享一款功能強(qiáng)大、超實(shí)用的SEO工具—— 尖叫青蛙( Screaming Frog SEO Spider)，具體有多強(qiáng)大和實(shí)用，請容Riven慢慢道來。

Screaming Frog是一個(gè)強(qiáng)大的SEO工具，對任何電子商務(wù)或博客站都是必不可少的。對于日常的SEO工作來說，它不僅能提升工作效率，還能清楚地了解到網(wǎng)站的結(jié)構(gòu)及頁面結(jié)構(gòu)等。如果使用得當(dāng)，它幾乎可以立即帶來顯著的SEO排名。

圖片來源：跨境男孩Riven

一、尖叫青蛙簡介

圖片來源：Creaming Frog-尖叫青蛙

尖叫青蛙是一款網(wǎng)站爬蟲工具，它會通過你提供的網(wǎng)站主域爬取你的網(wǎng)站，并獲取你網(wǎng)站里所有的網(wǎng)頁以及關(guān)鍵元素，并實(shí)時(shí)提供分析結(jié)果。

二、尖叫青蛙亮點(diǎn)功能

2.1 獲取網(wǎng)站內(nèi)所有的鏈接及導(dǎo)出鏈接

網(wǎng)站內(nèi)所有的鏈接包括html、css、JavaScript、圖片等，導(dǎo)出鏈接可以獲取網(wǎng)站內(nèi)容所有導(dǎo)出的鏈接，方便大家清理不想導(dǎo)出的鏈接。

2.2 列出所有鏈接的信息

尖叫青蛙強(qiáng)大的地方就在于它不僅獲取了網(wǎng)站內(nèi)所有的鏈接，我們通過鏈接的就能獲取到該鏈接的所有信息，大致包括該鏈接包含鏈接數(shù)、狀態(tài)碼、是否被robots屏蔽、該網(wǎng)頁標(biāo)題、標(biāo)題長度、描述、關(guān)鍵詞、發(fā)布時(shí)間等等所有的信息，分析的信息詳細(xì)到只有你想不到的，沒有你找不到的。

2.3 快速找出網(wǎng)站中的死鏈（ 404鏈接 ）

上面說到可以查看每個(gè)鏈接的狀態(tài)碼，通過狀態(tài)碼，我們就能快速找到網(wǎng)站中存在的死鏈。相信很多小伙伴都會頭疼蜘蛛每天在抓死鏈卻找不出死鏈出現(xiàn)在哪個(gè)位置，而這款工具除了能找出網(wǎng)頁中所有的死鏈外，它更厲害的是你可以點(diǎn)擊一個(gè)死鏈，在inlink標(biāo)簽里就能顯示在哪些頁面含有這個(gè)死鏈。是不是很方便？

2.4 生成xml地圖

這款工具可以快速創(chuàng)建XML站點(diǎn)地圖和圖像XML站點(diǎn)地圖，通過URL進(jìn)行高級配置，包括上次修改，優(yōu)先級和更改頻率。

2.5 有助審查robots和其他指令

通過尖叫青蛙工具里的indexability欄，你可以清楚地看到每一個(gè)鏈接是否被robots屏蔽、是否被nofollow。

2.6 分析站點(diǎn)架構(gòu)

通過使用交互式爬網(wǎng)和目錄強(qiáng)制導(dǎo)向圖和樹形圖，可以有助你們分析可視化的評估內(nèi)部鏈接和URL結(jié)構(gòu)。

圖片來源：Creaming Frog-尖叫青蛙

2.7 其他一些功能

除了以上功能外，尖叫青蛙還有其他一些功能，比如查看鏈接是否被重定向、網(wǎng)頁大小、鏈接細(xì)節(jié)信息、搜索結(jié)果展示頁效果圖、列舉網(wǎng)頁內(nèi)的h標(biāo)簽、rel =“next”和rel =“prev”(文章頁上下篇鏈接)、檢查重復(fù)的URL等等。

三、產(chǎn)品用戶界面

使用此工具的第一步是了解所有內(nèi)容的模塊區(qū)分，主要包括：菜單欄、抓取區(qū)域、標(biāo)簽欄、主窗口、詳細(xì)窗口、側(cè)邊欄

圖片來源：Creaming Frog-尖叫青蛙

3.1 菜單欄

圖片來源：Creaming Frog-尖叫青蛙

菜單欄為Screaming Frog的一些全局配置功能，主要包括：文件（如快速訪問最近抓取的網(wǎng)站等）、模式（蜘蛛、列表、SERP、比較）、配置（蜘蛛、Robots.txt、爬網(wǎng)速度、用戶代理、排除等）、選擇導(dǎo)出等

3.2 抓取區(qū)域

圖片來源：Creaming Frog-尖叫青蛙

當(dāng)為Spider蜘蛛模式下時(shí)，僅需輸入主域名或URL，然后點(diǎn)擊「Start」按鈕即可；

可以選擇Pause暫?；駽lear清空按鈕，或者查看進(jìn)度條，等待全站抓取完全。

3.3 標(biāo)簽欄

圖片來源：Creaming Frog-尖叫青蛙

圖片來源：Creaming Frog-尖叫青蛙

可以選擇配置常用的標(biāo)簽菜單為可見狀態(tài)，也可以拖拽進(jìn)行標(biāo)簽菜單進(jìn)行排序。

為簡潔起見，我不會覆蓋菜單中的每個(gè)選項(xiàng)卡，但我會介紹在軟件中最常用的選項(xiàng)卡，了解這些是什么以及如何使用它們幫助你進(jìn)行SEO分析。

內(nèi)部鏈接（Internal）：篩選顯示該網(wǎng)站內(nèi)為主域名下path 的URL，不含External出站鏈接（別的自定義域名的網(wǎng)站）

狀態(tài)代碼（Response Codes）：這些是你的網(wǎng)站在請求頁面時(shí)返回的代碼。這將只包含可以使用內(nèi)部鏈接找到的頁面。如果你擁有大量用戶配置文件或用戶生成的內(nèi)容，這會使網(wǎng)站的爬網(wǎng)速度變得更快，你可以排除網(wǎng)站的各個(gè)部分以加快抓取速度。通常，服務(wù)器將返回20X，30X，40X或50X狀態(tài) - 分別表示正常，重定向，客戶端錯(cuò)誤和服務(wù)器錯(cuò)誤。

頁面標(biāo)題（Page Title）：你可以在此處快速訪問你網(wǎng)站上的網(wǎng)頁標(biāo)題。如果你有超過1頁的標(biāo)題，它會這樣說。此選項(xiàng)卡還具有用于查找重復(fù)，短，長和缺失標(biāo)記的過濾器選項(xiàng)，以及用于檢查標(biāo)題是否與H1標(biāo)記匹配的選項(xiàng)。

元描述（Meta Description）：你可以在此處找到元描述，并按重復(fù)，短，長和缺失描述進(jìn)行過濾。

H1標(biāo)簽（Headling 1）：這是你可以找到所有H1標(biāo)簽的地方，它包括重復(fù)，多個(gè)和缺少h1標(biāo)簽的過濾器。這對于分析整個(gè)站點(diǎn)的h1標(biāo)簽很有用。

H2標(biāo)簽（Headling 2）：這是上述部分的重復(fù)，但僅適用于H2標(biāo)簽。重要的是要注意雖然有多個(gè)h2標(biāo)簽可供選擇，但這不再是一個(gè)重要因素。

圖像（Images）：你可以在此處找到爬網(wǎng)期間在網(wǎng)站上使用的所有圖像的列表。它將包括其URL路徑，圖像的使用次數(shù)，并可按大小和alt屬性進(jìn)行過濾。此部分非?；A(chǔ)，反映了抓取工具讀取圖像的難度。

3.4 主窗口

圖片來源：Creaming Frog-尖叫青蛙

根據(jù)上方3.3選擇的標(biāo)簽菜單，此處主窗口區(qū)域會顯示其下面的URL和相關(guān)字段（聯(lián)動(dòng)展示）；也支持對表單字段進(jìn)行拓展排序

圖片來源：Creaming Frog-尖叫青蛙

支持篩選URL的格式（HTML、JacaScript、Images、PDF等）；支持對URL進(jìn)行扁平化或樹狀結(jié)構(gòu)展示；支持導(dǎo)出

3.5 詳細(xì)窗口

圖片來源：Creaming Frog-尖叫青蛙

在3.4的主窗口中，點(diǎn)擊某一個(gè)URL后，可以在下方查看該URL的詳細(xì)信息（比如TDKU、H1、H2、Indexable、頁面字符數(shù)、響應(yīng)時(shí)間等）；

支持查看「Inlinks」，即查詢哪些頁面跳轉(zhuǎn)至該URL、及對應(yīng)的Anchor Text錨文本；

支持查看「Outlinks」，即該URL內(nèi)跳轉(zhuǎn)至別的頁面的鏈接及Anchor Text錨文本等；

支持查看SERP Snippets、Strcutured Data Detailes等

3.6 側(cè)邊欄

支持查看該網(wǎng)站的統(tǒng)計(jì)數(shù)據(jù)、SEO問題分類統(tǒng)計(jì)等，如下圖我切換至顯示該網(wǎng)站內(nèi)的3xx重定向的URL數(shù)據(jù)；

圖片來源：Creaming Frog-尖叫青蛙

由于篇幅有限，這里就不詳細(xì)展開介紹了，歡迎文末掃碼加微信交流獨(dú)立站Google SEO~

四、安裝版本

4.1 如何安裝尖叫青蛙？

下載地址：https://www.screamingfrog.co.uk/seo-spider/

4.2 版本套餐

圖片來源：Creaming Frog-尖叫青蛙

目前尖叫青蛙有免費(fèi)版和收費(fèi)版兩種：

免費(fèi)版：免費(fèi)版的功能與付費(fèi)版差不多，但免費(fèi)版最多只能抓取500個(gè)鏈接，當(dāng)鏈接抓取數(shù)量超過500時(shí)就會自動(dòng)停止。

付費(fèi)版：無鏈接抓取數(shù)量限制，付費(fèi)版價(jià)格：￡149.00 Per Year(149英鎊/每年)

如果你想使用付費(fèi)版，建議在淘寶上買共享版本，性價(jià)比高。

五、功能操作說明

5.1 如何使用尖叫青蛙？

使用Screaming Frog有許多不同的方法，但主要目標(biāo)是抓取并修復(fù)你的網(wǎng)站。要開始使用，只需在線下載，然后安裝即可。

完成此操作后，即可開始抓取你的網(wǎng)站。對于中型網(wǎng)站，這通常需要幾分鐘。大型網(wǎng)站可能需要更長時(shí)間才能抓取，并且你可能會耗盡內(nèi)存。

完成抓取后，你可以輕松查看整個(gè)網(wǎng)站的錯(cuò)誤。只需瀏覽菜單和選項(xiàng)卡即可瀏覽各種可用工具。

5.2 尖叫的青蛙如何抓取網(wǎng)站？

圖片來源：Creaming Frog-尖叫青蛙

使用Screaming Frog，你可以輕松抓取網(wǎng)站。首先，你只需要在蜘蛛中輸入起始URL即可。此選項(xiàng)位于屏幕頂部。

從這里開始，網(wǎng)站將一次自動(dòng)抓取一個(gè)URL。但是，重要的是要注意Screaming Frog基于內(nèi)部鏈接。因此，任何缺少鏈接的頁面都不會出現(xiàn)在抓取中。

如果你在抓取網(wǎng)站上的任何網(wǎng)址時(shí)遇到問題，可能被機(jī)器人屏蔽。這通?？梢栽?span>你的robots.txt設(shè)置中進(jìn)行檢查。

5.3 尖叫的青蛙如何抓取網(wǎng)址列表？

在某些情況下，你需要抓取網(wǎng)址列表。比如你正在清理索引，希望檢查這些鏈接是否存在404鏈接，此時(shí)就可以使用Scraper工具。

當(dāng)你創(chuàng)建列表后，復(fù)制到剪貼板。從Screaming Frog菜單中選擇“Mode”，你可以更改為列表模式而不是蜘蛛模式。這樣你就可以將這些URL直接粘貼到Screaming Frog中。你還可以從文件，站點(diǎn)地圖或手動(dòng)添加列表中抓取列表：

圖片來源：Creaming Frog-尖叫青蛙

5.4 如何更改尖叫的青蛙抓取設(shè)置？

如果你在抓取網(wǎng)站時(shí)遇到問題，更改抓取設(shè)置會很有用。它更快速，更容易，因此請按照以下說明操作：

5.4.1 讓尖叫青蛙爬得更快：

如果你想讓Screaming Frog爬得更快，可以在  Configuration> Speed中完成。只需增加最大線程數(shù)，并刪除任何URL限制。

但是，如果你過快地抓取你的網(wǎng)站，則可能會被阻止。你可以通過將IP地址列入白名單來更改服務(wù)器設(shè)置中的此設(shè)置。

圖片來源：Creaming Frog-尖叫青蛙

5.4.2 讓尖叫的青蛙爬行更慢：

如果你的網(wǎng)站托管在Shopify或SHOPLINE上，或者你不能將你的IP地址列入白名單; 那么你會想慢慢抓取網(wǎng)站?？梢栽贑onfiguration> Speed中更改此  設(shè)置。你可以為每秒的URI請求數(shù)添加限制。

你還可以通過減少線程數(shù)來降低爬網(wǎng)速度。默認(rèn)情況下，線程數(shù)為5。這可以減少到1或2，這將明顯降低你抓取的速度。

圖片來源：Creaming Frog-尖叫青蛙

5.4.3 忽略Robots.txt：

互聯(lián)網(wǎng)上有一些網(wǎng)站阻止了所有機(jī)器人，這通常是在robots.txt中設(shè)置錯(cuò)誤了。如果是這種情況，你需要盡快修復(fù)。

但是，如果這是一個(gè)開發(fā)網(wǎng)站，并且你不希望它被編入索引; 你需要忽略robots.txt。

為此，你可以在Configurations> Robots.txt> Settings中更改  設(shè)置?？梢赃x擇忽略robots.txt。即使robots.txt禁止你這樣做，也可以抓取網(wǎng)站。

圖片來源：Creaming Frog-尖叫青蛙

5.4.4 更改用戶代理：

我很少需要做的就是更改我的用戶代理以進(jìn)行爬網(wǎng)。默認(rèn)為Screaming Frog，但你可能希望以與Googlebot相同的方式查看網(wǎng)站。因此，更改用戶代理有時(shí)會有所幫助。

要更改此設(shè)置，你需要在Configuration> User-agent中打開設(shè)置  。在這里，你可以找到一個(gè)下拉菜單，以選擇不同的預(yù)設(shè)。

但是，使用用戶代理時(shí)應(yīng)該小心。如果你經(jīng)常進(jìn)行服務(wù)器日志分析，則數(shù)據(jù)會受到影響。

圖片來源：Creaming Frog-尖叫青蛙

5.5 如何保存已爬取數(shù)據(jù)？

點(diǎn)擊左上角文件「Save as」按鈕，保存至本地；下次可以直接將seospider文件拖拽至尖叫青蛙內(nèi)即可快速訪問

圖片來源：Creaming Frog-尖叫青蛙

圖片來源：Creaming Frog-尖叫青蛙

5.6 如何創(chuàng)建站點(diǎn)地圖?

Google強(qiáng)烈建議你使用XML Sitemap網(wǎng)站地圖。它可以幫助他們抓取你的網(wǎng)站并查找的所有新內(nèi)容。

創(chuàng)建站點(diǎn)地圖的第一步是抓取你的網(wǎng)站。然后，你將需要生成一個(gè)新文件。為此，請從菜單中選擇“創(chuàng)建XML站點(diǎn)地圖”。

圖片來源：Creaming Frog-尖叫青蛙

這應(yīng)該創(chuàng)建一個(gè)要求配置的彈出窗口。默認(rèn)情況下這很好用，但你可能希望進(jìn)行更改。

例如，你可能希望更改更新的頻率：

圖片來源：Creaming Frog-尖叫青蛙

或者，你可能希望包含規(guī)范化的URL：

圖片來源：Creaming Frog-尖叫青蛙

如果你為網(wǎng)站的每個(gè)頁面添加了規(guī)范，這將非常有用。否則，你可能會收到站點(diǎn)地圖為空的通知。

5.7 如何找到死鏈接？

要查找損壞的死鏈接，首先需要選擇“響應(yīng)代碼”標(biāo)簽。然后選擇顯示客戶端錯(cuò)誤（4XX）的過濾器，并選擇“internal” 選項(xiàng)卡，主窗口區(qū)域顯示的鏈接就是站內(nèi)404破損鏈接。

圖片來源：Creaming Frog-尖叫青蛙

5.8 如何檢查重定向？

使用與上述相同的方法，選擇顯示重定向（3XX）的過濾器。這將為你提供所有內(nèi)部重定向。

雖然重定向沒有任何害處，但你應(yīng)該嘗試在內(nèi)部減少這些重定向。這就是為什么這很重要：

當(dāng)外部網(wǎng)站鏈接到損壞的頁面時(shí)，重定向可以幫助用戶。這使得它成為一件好事。但是，當(dāng)你這樣做時(shí)，那就糟糕了。

這是因?yàn)橹囟ㄏ蛐枰?wù)器處理請求。這會增加頁面加載時(shí)間。因此，由于你可以控制內(nèi)部鏈接，因此應(yīng)該替換它。

圖片來源：Creaming Frog-尖叫青蛙

5.9 檢查內(nèi)部鏈接

檢查內(nèi)部鏈接的快速簡便方法是使用Screaming Frog。這是因?yàn)樗ㄟ^內(nèi)部鏈接抓取整個(gè)網(wǎng)站，因此收集了大量有關(guān)網(wǎng)站導(dǎo)航，錨文本和alt屬性的數(shù)據(jù)。

要檢查指向頁面的內(nèi)部鏈接，只需搜索你要查看的URL地址即可。這可以在主窗口的右側(cè)找到。

找到URL后，選擇屏幕底部的“鏈接”選項(xiàng)卡。然后，這將使用數(shù)據(jù)填充詳細(xì)窗口，你可以開始瀏覽鏈接。

有6個(gè)主要字段：Type、From、To、Anchor Text（錨文本）、Alt Text、Follow。但是，最重要的列將是From、To和Anchor Text。

圖片來源：Creaming Frog-尖叫青蛙

5.10 標(biāo)題和元標(biāo)記

標(biāo)題和標(biāo)題是揭示與Google相關(guān)的網(wǎng)頁相關(guān)性的一些最大信號。因此，你需要使用Screaming Frog快速分析你的內(nèi)容。

要開始使用，只需選擇頁面標(biāo)題選項(xiàng)卡即可。然后，這將向你顯示所有HTML頁面和相應(yīng)的標(biāo)題?？梢赃^濾此數(shù)據(jù)以顯示具有缺失，重復(fù)，短，長和多個(gè)標(biāo)題的頁面。這將幫助你找到快速解決的問題。

5.10.1 頁面標(biāo)題優(yōu)化：

為了充分利用我們的頁面標(biāo)題，你應(yīng)該為每個(gè)頁面設(shè)置一個(gè)唯一的標(biāo)題。請務(wù)必在該頁面中包含目標(biāo)關(guān)鍵字，并避免在多個(gè)頁面標(biāo)題中使用相同的關(guān)鍵字。

圖片來源：Creaming Frog-尖叫青蛙

5.10.2 標(biāo)題優(yōu)化：

我的主要提示是確保每頁包含一個(gè)H1標(biāo)記，每頁至少包含1個(gè)H2標(biāo)記。標(biāo)題是讓Google了解你的網(wǎng)頁內(nèi)容的絕佳方式，并且你的用戶可以看到它們。嘗試包括你的核心術(shù)語和主題相關(guān)標(biāo)題。

圖片來源：Creaming Frog-尖叫青蛙

5.10.3 元描述優(yōu)化：

這些不是直接排名因素，但谷歌在其搜索引擎結(jié)果頁面（SERP）中使用它們。因此，值得將這些簡短而引人注目的用戶。在說明中包含你的核心關(guān)鍵字，因?yàn)樗阉髡哒业?span>你的網(wǎng)頁時(shí)，這些關(guān)鍵字通常會變?yōu)榇煮w。

圖片來源：Creaming Frog-尖叫青蛙

5.10.4 元關(guān)鍵詞優(yōu)化：

這些用于向Google提供有關(guān)你網(wǎng)頁內(nèi)容的重要數(shù)據(jù)。然而，近10年來，這并不是一個(gè)排名因素。因此，建議不用花太多時(shí)間填寫這些。

圖片來源：Creaming Frog-尖叫青蛙

5.11 圖像

大多數(shù)SEO都經(jīng)常會忽略這些。但是，它們?nèi)匀皇桥琶蛩?，?yīng)引起一些關(guān)注。Screaming Frog非常適合發(fā)現(xiàn)改善圖像的機(jī)會。

圖片來源：Creaming Frog-尖叫青蛙

5.12 HREFLang

檢查HREFLang標(biāo)簽有很多好方法，但Screaming Frog是另一種方法。這可以在屏幕頂部的Hreflang選項(xiàng)卡下找到。

查看此選項(xiàng)卡時(shí)，有許多方法可以過濾數(shù)據(jù)。使用這些過濾器可以幫助你找到任何問題。

圖片來源：Creaming Frog-尖叫青蛙

5.13 排除工具

排除工具用于從你的抓取中排除你網(wǎng)站的各個(gè)部分。因此，它的功能很像robot.txt文件。

當(dāng)你處理大型網(wǎng)站時(shí)，這可能很有用。例如，如果要排除wordpress標(biāo)記頁面，則會將其排除在外：https://www.seoriven.com/tag/.*。*意味著忽略所有變化。如果要阻止URL參數(shù)或網(wǎng)站的整個(gè)部分，這可能很有用。

圖片來源：Creaming Frog-尖叫青蛙

5.14 尖叫青蛙其他設(shè)置

一旦你在抓取大型網(wǎng)站時(shí)遇到麻煩，當(dāng)然不希望每次都全量爬行。只需使用菜單選項(xiàng)保存爬網(wǎng)即可。通過像普通文件一樣雙擊它或打開尖叫的青蛙Screaming Frog，可以在以后再次打開此爬行。打開后，你可以從保存它的同一下拉菜單中選擇加載爬網(wǎng)。

批量導(dǎo)出工具對于創(chuàng)建具有單一類型信息的電子表格非常有用。我最喜歡的批量選項(xiàng)包括導(dǎo)出所有錨文本、所有30x重定向、所有40x錯(cuò)誤、內(nèi)部鏈接、圖像等。

當(dāng)我審核一個(gè)網(wǎng)站時(shí)，我覺得上面的內(nèi)容特別有用。

六、最后

以上就是SEO工具Screaming Frog SEO Spider(尖叫青蛙)的大致介紹了，它的功能是不是很強(qiáng)大超實(shí)用呢？

若你在使用Screaming Frog過程中，有不清楚的問題，歡迎留言

（來源：跨境男孩）

以上內(nèi)容屬作者個(gè)人觀點(diǎn)，不代表雨果跨境立場！本文經(jīng)原作者授權(quán)轉(zhuǎn)載，轉(zhuǎn)載需經(jīng)原作者授權(quán)同意。?