如何抓取網(wǎng)頁上的數(shù)據(jù) 如何抓取執(zhí)行js之后的網(wǎng)頁內(nèi)容?
如何抓取執(zhí)行js之后的網(wǎng)頁內(nèi)容?如果您對爬網(wǎng)性能沒有任何要求,請嘗試selenium或Watir。Web自動(dòng)化測試腳本可以很好地使用它做很多事情。使用瀏覽器執(zhí)行JS,然后從dom獲取數(shù)據(jù)。另一方面,如
如何抓取執(zhí)行js之后的網(wǎng)頁內(nèi)容?
如果您對爬網(wǎng)性能沒有任何要求,請嘗試selenium或Watir。Web自動(dòng)化測試腳本可以很好地使用它做很多事情。使用瀏覽器執(zhí)行JS,然后從dom獲取數(shù)據(jù)。另一方面,如果您知道JS是通過Ajax或API獲取數(shù)據(jù)的,那么直接獲取數(shù)據(jù)源,并獲得JSON或XML來管理數(shù)據(jù)