最近在忙于找工作,閑暇之余,也找點(diǎn)爬蟲項(xiàng)目練練手,寫寫代碼,知道自己是個(gè)菜鳥,但是要多加練習(xí),書山有路勤為徑。各位爺有測試坑可以給我介紹個(gè)啊,自動(dòng)化,功能,接口都可以做。
首先呢,我們明確需求,很多同學(xué)呢,有事沒事就想看看一些技術(shù),比如我想看看JQuery的語法呢,可是我現(xiàn)在沒有網(wǎng)絡(luò),手機(jī)上也沒有電子書,真的讓我們很難受,那么別著急啊,你這需求我在這里滿足你,首先呢,你的需求是獲取JQuery的語法的,那么我在看到這個(gè)需求,我有響應(yīng)的網(wǎng)站那么我們接下來去分析這個(gè)網(wǎng)站。http://www.w3school.com.cn/jquery/jquery_syntax.asp 這是語法url, http://www.w3school.com.cn/jquery/jquery_intro.asp 這是簡介的url,那么我們拿到很多的url分析到,我們的http://www.w3school.com.cn/jquery是相同的,那么我們在來分析在界面怎么可以獲取得到這些,我們可以看到右面有相應(yīng)的目標(biāo)欄,那么我們?nèi)シ治鱿?/p>
我們來看下這些鏈接,。我們可以吧這些鏈接和http://www.w3school.com.cn拼接到一起。然后組成我們新的url,
上代碼
import urllib.requestfrom bs4 import BeautifulSoup import timedef head(): headers={ 'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:52.0)&