本篇內(nèi)容主要講解“怎么利用Python來收集圖片數(shù)據(jù)”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學(xué)習(xí)“怎么利用Python來收集圖片數(shù)據(jù)”吧!
專注于為中小企業(yè)提供成都網(wǎng)站設(shè)計、做網(wǎng)站服務(wù),電腦端+手機端+微信端的三站合一,更高效的管理,為中小企業(yè)牟平免費做網(wǎng)站提供優(yōu)質(zhì)的服務(wù)。我們立足成都,凝聚了一批互聯(lián)網(wǎng)行業(yè)人才,有力地推動了超過千家企業(yè)的穩(wěn)健成長,幫助中小企業(yè)通過網(wǎng)站建設(shè)實現(xiàn)規(guī)模擴充和轉(zhuǎn)變。
我們首先確定網(wǎng)址,我們先使用開發(fā)者工具,定位到我們要的數(shù)據(jù)。發(fā)現(xiàn),內(nèi)容就在網(wǎng)頁源代碼中。
url = 'https://www.hexuexiao.cn/tj/WuJiayi/' res = requests.get(url) # print(res.text) html_url = re.findall('<a href="https://www.hexuexiao.cn/a/(\d+).html" rel="external nofollow" >',res.text,re.S) urls = sorted(list(set(html_url)), key=html_url.index)
我們這里html_url
變量的值是一個正則表達式對象,用于匹配網(wǎng)站圖片的鏈接。代碼塊 list(set(html_url))
將列表對象轉(zhuǎn)換為集合對象,使用 set()
方法將列表對象轉(zhuǎn)換為集合對象,這是一個將列表中的元素轉(zhuǎn)換為集合的方法。html_url.index
是一個整數(shù)對象,表示 html_url
中各元素在原始 HTML 字符串中出現(xiàn)的次數(shù),以此來實現(xiàn)排序。
for url1 in urls: for page in range(0,10): url2 = f'https://www.hexuexiao.cn/a/{url1}-{page}.html' # print(url2) res1 = requests.get(url2) # print(res1.text) url3 = re.findall('<img src=(.*?)/></a>',res1.text,re.S)[0] print(url3) url3=re.sub('',"",url3) print(url3)
我們這段代碼中的 urls
列表是一個字典,其中鍵是 URL,值是頁碼。在循環(huán)中,我們使用 range()
函數(shù)從 0 到 9 迭代頁碼。接下來,我們使用 requests.get()
方法分別獲取每個頁面的 HTML 代碼,并使用正則表達式匹配出所有的圖片鏈接。最后,我們使用 requests.get()
方法獲取每個圖片鏈接的內(nèi)容,并將其寫入一個文件中。
content = requests.get(url3).content with open('圖片\' + str(num) + '.jpg', mode='wb') as f: f.write(content)
我們這段代碼中的 content
變量的值是從圖片鏈接 url3
中獲取的內(nèi)容。然后,使用 with open()
語句打開一個二進制文件,并將 content
寫入文件中。在這個過程中,num
變量的值是當(dāng)前文件中的圖片序號。獲取圖片和我們之前獲取音頻一樣,都是保存成二進制文件。
這樣,我們的圖片數(shù)據(jù)就保存下來了。這里,我就不展示效果了,原理都是一樣的,找到圖片的地址,我們就可以獲取下來。
到此,相信大家對“怎么利用Python來收集圖片數(shù)據(jù)”有了更深的了解,不妨來實際操作一番吧!這里是創(chuàng)新互聯(lián)網(wǎng)站,更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢,關(guān)注我們,繼續(xù)學(xué)習(xí)!
當(dāng)前標(biāo)題:怎么利用Python來收集圖片數(shù)據(jù)
當(dāng)前地址:http://aaarwkj.com/article22/peiocc.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供營銷型網(wǎng)站建設(shè)、微信公眾號、ChatGPT、網(wǎng)站制作、域名注冊、網(wǎng)站維護
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)