最近因?yàn)閯』?，老大追了愛奇藝的一部網(wǎng)劇，由丁墨的同名小說《美人為餡》改編，目前已經(jīng)放出兩季，雖然整部劇槽點(diǎn)滿滿，但是老大看得不亦樂乎，并且在看完第二季之后跟我要小說資源，直接要奔原著去看結(jié)局……
隨手搜了下，都是在線資源，下載的話需要登錄，注冊登錄好麻煩，寫個(gè)爬蟲玩玩也好，于是動(dòng)手用 node 寫了一個(gè)，這里做下筆記
工作流程
獲取 URLs 列表(請(qǐng)求資源
request模塊)根據(jù) URLs 列表獲取相關(guān)頁面源碼(可能遇到頁面編碼問題，
iconv-lite模塊)源碼解析，獲取小說信息(
cheerio模塊)保存小說信息到 Markdown 文件，并且加適當(dāng)修飾以及章節(jié)信息(寫文件
fs、同步請(qǐng)求資源延伸閱讀
- ssh框架 2016-09-30
- 阿里移動(dòng)安全 [無線安全]玩轉(zhuǎn)無線電——不安全的藍(lán)牙鎖 2017-07-26
- 消息隊(duì)列NetMQ 原理分析4-Socket、Session、Option和Pipe 2024-03-26
- Selective Search for Object Recognition 論文筆記【圖片目標(biāo)分割】 2017-07-26
- 詞向量-LRWE模型-更好地識(shí)別反義詞同義詞 2017-07-26
- 從棧不平衡問題 理解 calling convention 2017-07-26
- php imagemagick 處理 圖片剪切、壓縮、合并、插入文本、背景色透明 2017-07-26
- Swift實(shí)現(xiàn)JSON轉(zhuǎn)Model - HandyJSON使用講解 2017-07-26
- 阿里移動(dòng)安全 Android端惡意鎖屏勒索應(yīng)用分析 2017-07-26
- 集合結(jié)合數(shù)據(jù)結(jié)構(gòu)來看看(二) 2017-07-26
學(xué)習(xí)是年輕人改變自己的最好方式