怎樣查看網(wǎng)站有沒(méi)有屏蔽百度蜘蛛的抓取
有些站長(zhǎng)在優(yōu)化網(wǎng)站的過(guò)程中，會(huì)遇到這樣一個(gè)問(wèn)題：我網(wǎng)站的關(guān)鍵詞布局沒(méi)問(wèn)題、內(nèi)容質(zhì)量沒(méi)問(wèn)題，并且規(guī)律性的更新網(wǎng)站內(nèi)容，同時(shí)也有持續(xù)在一些高權(quán)重平臺(tái)發(fā)布外鏈，為什么百度蜘蛛就是不收錄的的網(wǎng)頁(yè)？對(duì)于這樣的問(wèn)題，筆者認(rèn)為首先要知道網(wǎng)站是否有屏蔽了百度蜘蛛的抓取，因?yàn)橛行┱鹃L(zhǎng)在建站初期的無(wú)意識(shí)操作下屏蔽了百度蜘蛛，這也是比較常見(jiàn)的。下面筆者來(lái)教大家怎樣查看網(wǎng)站有沒(méi)有屏蔽百度蜘蛛的抓取。網(wǎng)站建設(shè)★網(wǎng)站設(shè)計(jì)★網(wǎng)站制作★網(wǎng)頁(yè)設(shè)計(jì)-800元全包;企業(yè)網(wǎng)絡(luò)推廣☆網(wǎng)站優(yōu)化☆seo☆關(guān)鍵詞排名☆百度快照-2200元全年展示;做網(wǎng)站優(yōu)化排名-網(wǎng)站建設(shè)公司
網(wǎng)站建設(shè)哪家好，找創(chuàng)新互聯(lián)公司！專(zhuān)注于網(wǎng)頁(yè)設(shè)計(jì)、網(wǎng)站建設(shè)、微信開(kāi)發(fā)、微信小程序開(kāi)發(fā)、集團(tuán)企業(yè)網(wǎng)站建設(shè)等服務(wù)項(xiàng)目。為回饋新老客戶創(chuàng)新互聯(lián)還提供了民勤免費(fèi)建站歡迎大家使用！
想知道網(wǎng)站有沒(méi)有屏蔽百度蜘蛛的抓取，有兩種方法
第一種：查看網(wǎng)站的robots.txt文件，此文件一般在網(wǎng)站的根目錄下，顯示如下：
User-agent:*
Disallow:/
這樣的表示是屏蔽所有搜索引擎蜘蛛的抓取。
User-agent:Baiduspider
Disallow:/
這樣就表示屏蔽了百度蜘蛛抓取。
那要怎樣才能讓百度蜘蛛抓取呢？筆者舉個(gè)例子，如下：
User-agent:*
Disallow:/wp-admin/
Disallow:/wp-content/
上述的例子中，把Disallow:/改成指定的屏蔽目錄就可以了，通常情況下，網(wǎng)站的后臺(tái)目錄是需要屏蔽的，只要指定的要屏蔽的目錄，其他頁(yè)面就會(huì)自動(dòng)默認(rèn)允許抓取了。另外還有一種方法就是把Disallow:/改成Allow:/，Allow的意思是指允許抓取的目錄或頁(yè)面。
第二種：查看網(wǎng)站的頁(yè)面代碼中是否設(shè)置屏蔽
在網(wǎng)站頁(yè)面代碼<head>與</head>之間，有沒(méi)有<meta name="robots"content="noindex,follow">或者<meta name="Baiduspider"content="noindex,follow">的代碼，如果有，把這段代碼刪除即可。
通過(guò)以上兩種方法都可以查看一個(gè)網(wǎng)站是否有屏蔽了百度蜘蛛的抓取，你學(xué)會(huì)了嗎？
新聞名稱(chēng)：怎樣查看網(wǎng)站有沒(méi)有屏蔽百度蜘蛛的抓取
分享鏈接：http://aaarwkj.com/article45/dghedhi.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供軟件開(kāi)發(fā)、Google、虛擬主機(jī)、App開(kāi)發(fā)、網(wǎng)站改版、服務(wù)器托管
聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)
- 搜索引擎優(yōu)化:網(wǎng)站跳出率高怎么解決 2023-05-03
- seo搜索引擎優(yōu)化-網(wǎng)站怎么和搜索引擎建立友好關(guān)系？ 2016-11-10
- 揭曉網(wǎng)站做搜索引擎優(yōu)化但仍然沒(méi)有排名的原因 2014-03-06
- 如何選擇網(wǎng)站搜索引擎優(yōu)化的關(guān)鍵詞？ 2015-08-20
- SEO搜索引擎優(yōu)化師如何判定網(wǎng)站好壞? 2022-07-15
- 搜索引擎優(yōu)化屌絲的成長(zhǎng)：從模仿到超越 2021-07-30
- 搜索引擎優(yōu)化公司:seo【網(wǎng)站】怎么寫(xiě)標(biāo)題？ 2016-11-14
- 搜索引擎優(yōu)化如何提升用戶體驗(yàn)？ 2022-09-26
- SEM廣告和SEO搜索引擎優(yōu)化怎么協(xié)作互幫互助 2022-07-23
- 搜索引擎優(yōu)化(SEO)算法 2021-06-10
- 搜索引擎優(yōu)化必須具備的“4P”品質(zhì) 2021-12-27
- 提高搜索引擎優(yōu)化的三種方式 2016-11-16