js注入和selenium的優(yōu)缺點(diǎn)？靜態(tài)爬網(wǎng)方法太多，而且非常簡(jiǎn)單。但動(dòng)態(tài)抓取不一樣，普通網(wǎng)站抓包也能找到接口文件，但大型網(wǎng)站不那么容易找到，所以在數(shù)據(jù)量小的情況下還是乖乖使用selenium來(lái)抓取。

js注入和selenium的優(yōu)缺點(diǎn)？

靜態(tài)爬網(wǎng)方法太多，而且非常簡(jiǎn)單。

但動(dòng)態(tài)抓取不一樣，普通網(wǎng)站抓包也能找到接口文件，但大型網(wǎng)站不那么容易找到，所以在數(shù)據(jù)量小的情況下還是乖乖使用selenium來(lái)抓取。

硒的優(yōu)點(diǎn)：好像沒(méi)有它就爬不上去，操作簡(jiǎn)單。

硒的缺點(diǎn)：耗時(shí)，效率低，模仿手動(dòng)點(diǎn)擊。

如何用python爬取知網(wǎng)論文數(shù)據(jù)？

爬行不行，爬行的本質(zhì)是用腳本批量訪問(wèn)。就像你去過(guò)無(wú)數(shù)次一樣。

知網(wǎng)的訪問(wèn)權(quán)是爬行知網(wǎng)的首要要求。

未經(jīng)允許，您不能爬行。

其次，即使您有訪問(wèn)權(quán)限，也不能批量下載。知網(wǎng)對(duì)訪問(wèn)有限制。如果你抓取超過(guò)20篇論文，你的帳戶將被鎖定，你無(wú)法繼續(xù)下載它們。