js注入和selenium的優(yōu)缺點？靜態(tài)爬網(wǎng)方法太多，而且非常簡單。但動態(tài)抓取不一樣，普通網(wǎng)站抓包也能找到接口文件，但大型網(wǎng)站不那么容易找到，所以在數(shù)據(jù)量小的情況下還是乖乖使用selenium來抓取。

js注入和selenium的優(yōu)缺點？

靜態(tài)爬網(wǎng)方法太多，而且非常簡單。

但動態(tài)抓取不一樣，普通網(wǎng)站抓包也能找到接口文件，但大型網(wǎng)站不那么容易找到，所以在數(shù)據(jù)量小的情況下還是乖乖使用selenium來抓取。

硒的優(yōu)點：好像沒有它就爬不上去，操作簡單。

硒的缺點：耗時，效率低，模仿手動點擊。

如何用python爬取知網(wǎng)論文數(shù)據(jù)？

爬行不行，爬行的本質是用腳本批量訪問。就像你去過無數(shù)次一樣。

知網(wǎng)的訪問權是爬行知網(wǎng)的首要要求。

未經允許，您不能爬行。

其次，即使您有訪問權限，也不能批量下載。知網(wǎng)對訪問有限制。如果你抓取超過20篇論文，你的帳戶將被鎖定，你無法繼續(xù)下載它們。