scrapy分布式爬蟲實例 python學(xué)習爬蟲,不會前端和全??梢詥??為何?
python學(xué)習爬蟲,不會前端和全??梢詥幔繛楹??我想我們需要學(xué)習。要成為一個爬蟲,我們不僅要了解Python本身的基礎(chǔ),還要了解HTTP的基本知識。我們無法理解整個堆棧。從靜態(tài)頁面抓取到動態(tài)生成內(nèi)容
python學(xué)習爬蟲,不會前端和全??梢詥??為何?
我想我們需要學(xué)習。要成為一個爬蟲,我們不僅要了解Python本身的基礎(chǔ),還要了解HTTP的基本知識。我們無法理解整個堆棧。從靜態(tài)頁面抓取到動態(tài)生成內(nèi)容抓取,還需要web前端(尤其是DOM)。另外,是否需要進一步控制瀏覽器?硒和CDP(chromedevtools協(xié)議)受到各種神的歡迎。這些都是web前端與HTTP和網(wǎng)絡(luò)的深度結(jié)合。
想用網(wǎng)絡(luò)爬蟲做畢業(yè)設(shè)計,有什么視頻資源和學(xué)習網(wǎng)站可推薦嗎?
謝謝你的邀請,我不知道!