這篇文章主要介紹了python如何爬取圖片,具有一定借鑒價值,需要的朋友可以參考下。希望大家閱讀完這篇文章后大有收獲。下面讓小編帶著大家一起了解一下。
網(wǎng)站建設哪家好,找成都創(chuàng)新互聯(lián)公司!專注于網(wǎng)頁設計、網(wǎng)站建設、微信開發(fā)、重慶小程序開發(fā)、集團企業(yè)網(wǎng)站建設等服務項目。為回饋新老客戶創(chuàng)新互聯(lián)還提供了巴宜免費建站歡迎大家使用!
打開網(wǎng)址 查看網(wǎng)頁結(jié)構(gòu)
用火狐瀏覽器打開鏈接 F12查看
由于我使用的pyquery
可以看到圖片的鏈接 都在img標簽的src屬性中 我們只要通過pyquery鎖定到這個img標簽 就可以繼續(xù)下一步了
我們先來嘗試抓取一頁的壁紙試試看
下面是具體的代碼:
#!/usr/bin/env python
# -*- coding: utf-8 -*-
# @Time : 2018/10/31 17:54
# 爬取圖片
import requests
from pyquery import PyQuery as pq
import time
headers = {
'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 '
'(KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'
}
# 這里我使用了代理 你可以去掉這個代理IP 我是為了后面大規(guī)模爬取做準備的
proxies = {
'https': '218.75.69.50:39590'
}
# 請求網(wǎng)頁 獲取源碼
def start_request(url):
r = requests.get(url, headers=headers, proxies=proxies)
# 這個網(wǎng)站頁面使用的是GBK編碼 這里進行編碼轉(zhuǎn)換
r.encoding = 'GBK'
html = r.text
return html
# 解析網(wǎng)頁 獲取圖片
def parse(text):
doc = pq(text)
# 鎖定頁面中的img標簽
images = doc('div.list ul li img').items()
x = 0
for image in images:
# 獲取每一張圖片的鏈接
img_url = image.attr('src')
# 獲得每張圖片的二進制內(nèi)容
img = requests.get(img_url, headers=headers, proxies=proxies).content
# 定義要存儲圖片的路勁
path = "F:\\image\\" + str(x) + ".jpg"
# 將圖片寫入指定的目錄 寫入文件用"wb"
with open(path, 'wb') as f:
f.write(img)
time.sleep(1)
print("正在下載第{}張圖片".format(x))
x += 1
print("寫入完成")
def main():
url = "http://www.netbian.com"
text = start_request(url)
parse(text)
if __name__ == "__main__":
main()
感謝你能夠認真閱讀完這篇文章,希望小編分享python如何爬取圖片內(nèi)容對大家有幫助,同時也希望大家多多支持創(chuàng)新互聯(lián),關注創(chuàng)新互聯(lián)行業(yè)資訊頻道,遇到問題就找創(chuàng)新互聯(lián),詳細的解決方法等著你來學習!
分享文章:python如何爬取圖片
網(wǎng)址分享:http://aaarwkj.com/article10/igesdo.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供企業(yè)建站、定制網(wǎng)站、外貿(mào)網(wǎng)站建設、網(wǎng)站建設、做網(wǎng)站、商城網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)