前言
大家有沒有發(fā)現(xiàn)之前我們寫的爬蟲都有一個(gè)共性，就是只能爬取單純的html代碼，如果頁(yè)面是JS渲染的該怎么辦呢？如果我們單純?nèi)シ治鲆粋€(gè)個(gè)后臺(tái)的請(qǐng)求，手動(dòng)去摸索JS渲染的到的一些結(jié)果，那簡(jiǎn)直沒天理了。所以，我們需要有一些好用的工具來(lái)幫助我們像瀏覽器一樣渲染JS處理的頁(yè)面。
其中有一個(gè)比較常用的工具，那就是
PhantomJS
Full web stack No browser required
PhantomJS is a headless WebKit scriptable with a JavaScript API. It has fast andnative support for various web standards: DOM handling, CSS selector, JSON, Canvas, and SVG.
PhantomJS是一個(gè)無(wú)界面的,可腳本編程的WebKit瀏覽器引擎。它原生支持多種web 標(biāo)準(zhǔn)：DOM 操作，CSS選擇器，JSON，Canvas 以及SVG。
好，接下來(lái)我們就一起來(lái)了解一下這個(gè)神奇好用的庫(kù)的用法吧。
ps：服務(wù)器是騰訊云
安裝
PhantomJS安裝方法有兩種，一種是下載源碼之后自己來(lái)編譯，另一種是直接下載編譯好的二進(jìn)制文件。然而自己編譯需要的時(shí)間太長(zhǎng)，而且需要挺多的磁盤空間。官方推薦直接下載二進(jìn)制文件然后安裝。
大家可以依照自己的開發(fā)平臺(tái)選擇不同的包進(jìn)行下載
延伸閱讀
- ssh框架 2016-09-30
- 阿里移動(dòng)安全 [無(wú)線安全]玩轉(zhuǎn)無(wú)線電——不安全的藍(lán)牙鎖 2017-07-26
- 消息隊(duì)列NetMQ 原理分析4-Socket、Session、Option和Pipe 2024-03-26
- Selective Search for Object Recognition 論文筆記【圖片目標(biāo)分割】 2017-07-26
- 詞向量-LRWE模型-更好地識(shí)別反義詞同義詞 2017-07-26
- 從棧不平衡問(wèn)題 理解 calling convention 2017-07-26
- php imagemagick 處理 圖片剪切、壓縮、合并、插入文本、背景色透明 2017-07-26
- Swift實(shí)現(xiàn)JSON轉(zhuǎn)Model - HandyJSON使用講解 2017-07-26
- 阿里移動(dòng)安全 Android端惡意鎖屏勒索應(yīng)用分析 2017-07-26
- 集合結(jié)合數(shù)據(jù)結(jié)構(gòu)來(lái)看看(二) 2017-07-26
學(xué)習(xí)是年輕人改變自己的最好方式