亚洲激情专区-91九色丨porny丨老师-久久久久久久女国产乱让韩-国产精品午夜小视频观看

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Node.js中怎么爬取豆瓣數據

發布時間:2021-06-17 11:55:44 來源:億速云 閱讀:123 作者:小新 欄目:web開發

小編給大家分享一下Node.js中怎么爬取豆瓣數據,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

1、需要解決的問題

  1. 搭建服務

  2. 怎么處理爬到的數據

  3. 怎么自動打開默認瀏覽器

2、搭建服務

搭建服務有好幾種方式,一開始我用的http,但是http有個弊端就是不能解析https協議的url,所以就用了express,解析https協議的網址我用了request包,豆瓣的網址是https的,

今天爬取的是https://movie.douban.com/chart這個網址;如下圖,我要獲取的有三個部分,圖片、電影名字、電影鏈接.

Node.js中怎么爬取豆瓣數據

Node.js中怎么爬取豆瓣數據

3、怎么處理爬到的數據

我們用request爬到的數據,怎么處理呢?cheerio包可以讓我們像Jq那樣處理爬到的html數據。

①、首先解析數據,取到爬取網頁的html數據;

Node.js中怎么爬取豆瓣數據

②、然后利用cheerio包操作爬到的數據,取到你想要的數據。

Node.js中怎么爬取豆瓣數據

③、取到數據,創建html,輸出到頁面。如下圖,我用的字符串拼接,辦法有點笨,還沒有找到更好的辦法。

Node.js中怎么爬取豆瓣數據

4、怎么自動打開默認瀏覽器

不知道你有沒有看vue-cli中webpack的配置,自動打開瀏覽器,vue-cli用的opn包.

Node.js中怎么爬取豆瓣數據

這個包用起來很方便,引入包,直接調用opn(url)即可;

5、展示

Node.js中怎么爬取豆瓣數據

Node.js中怎么爬取豆瓣數據

以上是“Node.js中怎么爬取豆瓣數據”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

沧源| 襄垣县| 和政县| 玉林市| 郸城县| 临湘市| 东乡族自治县| 抚顺市| 五寨县| 白沙| 汶川县| 云霄县| 九江市| 和顺县| 商城县| 和平县| 婺源县| 仪陇县| 呼玛县| 从化市| 密云县| 蒙城县| 儋州市| 乐都县| 北宁市| 望江县| 河北省| 安国市| 台东市| 若羌县| 通许县| 西安市| 三原县| 伽师县| 肃宁县| 赞皇县| 饶阳县| 乌兰察布市| 司法| 天祝| 泸溪县|