介紹過搜索引擎蜘蛛,順便也介紹下HTTP狀態(tài)碼,之前我們說了robots.txt可以限制蜘蛛爬行網(wǎng)站文件,那么怎么知道蜘蛛什么時(shí)候爬行過自己的網(wǎng)站?爬行后的結(jié)果是什么呢?是抓取了還是?這節(jié)HTTP狀態(tài)碼就會(huì)告訴你,網(wǎng)站日記文件會(huì)把每天搜索引擎蜘蛛爬行記錄以編碼的形式統(tǒng)計(jì)起來,以便我們隨時(shí)查看。
一般在網(wǎng)站日志中,最常見的HTTP狀態(tài)碼就是200和404。
其他常見的HTTP狀態(tài)碼以及其代表的含義有:
成功2××成功處理了請(qǐng)求的狀態(tài)碼。
200服務(wù)器已成功處理了請(qǐng)求并提供了請(qǐng)求的網(wǎng)頁。
204服務(wù)器成功處理了請(qǐng)求,但沒有返回任何內(nèi)容
重定向3××每次請(qǐng)求中使用重定向不要超過5次。
301請(qǐng)求的網(wǎng)頁已永久移動(dòng)到新位置。當(dāng)URLs發(fā)生變化時(shí),使用301代碼。搜索引擎索引中保存新的URL。
302請(qǐng)求的網(wǎng)頁臨時(shí)移動(dòng)到新位置。搜索引擎索引中保存原來的URL。
304如果網(wǎng)頁自請(qǐng)求者上次請(qǐng)求后沒有更新,則用304代碼告訴搜索引擎機(jī)器人,可節(jié)省帶寬和開銷。
客戶端錯(cuò)誤4××表示請(qǐng)求可能出錯(cuò),妨礙了服務(wù)器的處理。
400服務(wù)器不理解請(qǐng)求的語法。
403服務(wù)器拒絕請(qǐng)求。
404服務(wù)器找不到請(qǐng)求的網(wǎng)頁。服務(wù)器上不存在的網(wǎng)頁經(jīng)常會(huì)返回此代碼。
410請(qǐng)求的資源永久刪除后,服務(wù)器返回此響應(yīng)。該代碼與404(未找到)代碼相似,但在資源以前存在而現(xiàn)在不存在的情況下,有時(shí)用來替代404代碼。如果資源已永久刪除,應(yīng)當(dāng)使用301指定資源的新位置。
服務(wù)器錯(cuò)誤5××表示服務(wù)器在處理請(qǐng)求時(shí)發(fā)生內(nèi)部錯(cuò)誤。這些錯(cuò)誤可能是服務(wù)器本身的錯(cuò)誤,而不是請(qǐng)求出錯(cuò)。
500服務(wù)器遇到錯(cuò)誤,無法完成請(qǐng)求。
503服務(wù)器目前無法使用(由于超載或停機(jī)維護(hù))。通常,這只是暫時(shí)狀態(tài)。
怎么看網(wǎng)站日志?
通過Ftp,在根目錄下可以看到一個(gè)包含log的文件夾,這就是網(wǎng)站日志。下載、解壓,里面的txt文件內(nèi)容就是日志記錄。但也有一些服務(wù)器或虛擬主機(jī)沒有提供log文件,請(qǐng)與主機(jī)商聯(lián)系,或自己開通服務(wù)器的記錄日志功能。
網(wǎng)站日志中怎么看搜索引擎蜘蛛?之前我們介紹什么是搜索引擎蜘蛛的時(shí)候介紹過各搜索引擎蜘蛛名稱。
創(chuàng)新互聯(lián)建站-企業(yè)級(jí)云服務(wù)器提供商,為用戶提供云服務(wù)器、CDN、云安全服務(wù)、成都服務(wù)器托管、服務(wù)器租用、高防主機(jī)等全方位云服務(wù)與各行業(yè)解決方案,幫助企業(yè)及個(gè)人極速備案,輕松上云,安全無憂。
當(dāng)前題目:什么是HTTP狀態(tài)碼?
分享網(wǎng)址:http://aaarwkj.com/article48/esdhep.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設(shè)計(jì)、ChatGPT、App開發(fā)、云服務(wù)器、網(wǎng)頁設(shè)計(jì)公司、靜態(tài)網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)