[求助] python如何爬取，網(wǎng)頁(yè)上調(diào)用JS函數(shù)打開(kāi)的視頻鏈接？Selenium phantom JS模擬點(diǎn)擊按鈕，或者編寫(xiě)另一個(gè)代碼來(lái)實(shí)現(xiàn)JS函數(shù)openvideo（）；按照第一步來(lái)解析新頁(yè)面，看

[求助] python如何爬取，網(wǎng)頁(yè)上調(diào)用JS函數(shù)打開(kāi)的視頻鏈接？

Selenium phantom JS模擬點(diǎn)擊按鈕，或者編寫(xiě)另一個(gè)代碼來(lái)實(shí)現(xiàn)JS函數(shù)openvideo（）；按照第一步來(lái)解析新頁(yè)面，看看是否可以找到視頻的原始地址；如果在第二步中找到視頻的原始地址，從視頻的原始地址下載視頻。

爬蟲(chóng)怎么爬取js動(dòng)態(tài)生成的數(shù)據(jù)？

當(dāng)我使用jsup編寫(xiě)爬蟲(chóng)程序時(shí)，通常會(huì)遇到HTML不返回的內(nèi)容。但是瀏覽器顯示了一些東西。所有這些都是分析頁(yè)的HTTP請(qǐng)求日志。分析頁(yè)面JS代碼來(lái)解決問(wèn)題。

1. 某些頁(yè)面元素被隱藏->替換選擇器解決方案

2。一些數(shù)據(jù)保存在JS/JSON對(duì)象中->截取相應(yīng)的字符串，分析并求解

3。通過(guò)API接口調(diào)用-> forge請(qǐng)求獲取數(shù)據(jù)

有一個(gè)終極方法

4。使用無(wú)頭瀏覽器如phantomjs或casperjs

Chrome出來(lái)的無(wú)頭瀏覽器，無(wú)頭是沒(méi)有界面的，據(jù)說(shuō)這件事，phantomjs宣布停止更新，但phantomjs仍然可以使用，也是無(wú)頭瀏覽器?；蛘咧苯尤ノt