大一python基礎(chǔ)編程題 python爬蟲(chóng)怎么寫循環(huán)爬取多個(gè)頁(yè)面?
python爬蟲(chóng)怎么寫循環(huán)爬取多個(gè)頁(yè)面?動(dòng)態(tài)加載的數(shù)據(jù)是在用戶通過(guò)鼠標(biāo)或鍵盤執(zhí)行某些操作后加載的。所以我們使用selenium提供的webdriver工具調(diào)用本地瀏覽器,讓程序代替人類行為,滾動(dòng)頁(yè)面,
python爬蟲(chóng)怎么寫循環(huán)爬取多個(gè)頁(yè)面?
動(dòng)態(tài)加載的數(shù)據(jù)是在用戶通過(guò)鼠標(biāo)或鍵盤執(zhí)行某些操作后加載的。
所以我們使用selenium提供的webdriver工具調(diào)用本地瀏覽器,讓程序代替人類行為,滾動(dòng)頁(yè)面,單擊按鈕,提交表單等等。從而得到所需的數(shù)據(jù)。所以我認(rèn)為使用selenium方法抓取動(dòng)態(tài)頁(yè)面的中心思想是模擬人類行為。