這篇文章主要介紹了Node爬蟲項(xiàng)目的示例分析,具有一定借鑒價(jià)值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
十載的臨澤網(wǎng)站建設(shè)經(jīng)驗(yàn),針對設(shè)計(jì)、前端、開發(fā)、售后、文案、推廣等六對一服務(wù),響應(yīng)快,48小時(shí)及時(shí)工作處理。成都全網(wǎng)營銷推廣的優(yōu)勢是能夠根據(jù)用戶設(shè)備顯示端的尺寸不同,自動調(diào)整臨澤建站的顯示方式,使網(wǎng)站能夠適用不同顯示終端,在瀏覽器中調(diào)整網(wǎng)站的寬度,無論在任何一種瀏覽器上瀏覽網(wǎng)站,都能展現(xiàn)優(yōu)雅布局與設(shè)計(jì),從而大程度地提升瀏覽體驗(yàn)。創(chuàng)新互聯(lián)從事“臨澤網(wǎng)站設(shè)計(jì)”,“臨澤網(wǎng)站推廣”以來,每個客戶項(xiàng)目都認(rèn)真落實(shí)執(zhí)行。
First
Introduction
50 lines, minimalist node crawler for Trending.
一個50行的node爬蟲,一個簡單的 axios, express, cheerio 體驗(yàn)項(xiàng)目。
Usage
首先保證電腦已存在node環(huán)境,然后
1.拉取本項(xiàng)目
git clone https://github.com/ZY2071/Crawler-for-Github-Trending.git cd Crawler-for-Github-Trending npm i node index.js
2.或者下載本項(xiàng)目壓縮包,解壓
cd Crawler-for-Github-Trending-master // 進(jìn)入項(xiàng)目文件夾 npm i node index.js
Examples
當(dāng)啟動項(xiàng)目后,可以看到控制臺輸出
Listening on port 3000!
此時(shí)打開瀏覽器,進(jìn)入本地服務(wù) http://localhost:3000/daily
http://localhost:3000/time-language // time表示周期,language代表語言 例如:
http://localhost:3000/daily // 代表今日 可選參數(shù):weekly,monthly
http://localhost:3000/daily-JavaScript// 代表今日的java分類 可選參數(shù):任意語言
稍微等待即可看到爬取完畢的返回?cái)?shù)據(jù):
[ { "title": "lib-pku / libpku", "links": "https://github.com/lib-pku/libpku", "description": "貴校課程資料民間整理", "language": "JavaScript", "stars": "14,297", "forks": "4,360", "info": "3,121 stars this week" }, { "title": "SqueezerIO / squeezer", "links": "https://github.com/SqueezerIO/squeezer", "description": "Squeezer Framework - Build serverless dApps", "language": "JavaScript", "stars": "3,212", "forks": "80", "info": "2,807 stars this week" }, ... ]
More
本項(xiàng)目僅供爬取體驗(yàn),每次訪問都會實(shí)時(shí)爬取數(shù)據(jù),所以數(shù)據(jù)返回速度會比較慢,實(shí)際操作應(yīng)該是定時(shí)爬取數(shù)據(jù)然后將數(shù)據(jù)存進(jìn)數(shù)據(jù)庫,數(shù)據(jù)從數(shù)據(jù)庫返回從而提高數(shù)據(jù)返回效率。
感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“Node爬蟲項(xiàng)目的示例分析”這篇文章對大家有幫助,同時(shí)也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識等著你來學(xué)習(xí)!
名稱欄目:Node爬蟲項(xiàng)目的示例分析
本文鏈接:http://aaarwkj.com/article14/iggode.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄、ChatGPT、微信公眾號、網(wǎng)站營銷、品牌網(wǎng)站制作、手機(jī)網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)