如何抓取網(wǎng)頁(yè)上的數(shù)據(jù) 如何抓取執(zhí)行js之后的網(wǎng)頁(yè)內(nèi)容?
如何抓取執(zhí)行js之后的網(wǎng)頁(yè)內(nèi)容?如果您對(duì)爬網(wǎng)性能沒(méi)有任何要求,請(qǐng)嘗試selenium或Watir。Web自動(dòng)化測(cè)試腳本可以很好地使用它做很多事情。使用瀏覽器執(zhí)行JS,然后從dom獲取數(shù)據(jù)。另一方面,如
如何抓取執(zhí)行js之后的網(wǎng)頁(yè)內(nèi)容?
如果您對(duì)爬網(wǎng)性能沒(méi)有任何要求,請(qǐng)嘗試selenium或Watir。Web自動(dòng)化測(cè)試腳本可以很好地使用它做很多事情。使用瀏覽器執(zhí)行JS,然后從dom獲取數(shù)據(jù)。另一方面,如果您知道JS是通過(guò)Ajax或API獲取數(shù)據(jù)的,那么直接獲取數(shù)據(jù)源,并獲得JSON或XML來(lái)管理數(shù)據(jù)