java和python在爬蟲(chóng)方面的優(yōu)勢(shì)和劣勢(shì)是什么？Python強(qiáng)大的網(wǎng)絡(luò)功能，模擬登陸，解析JavaScript，缺點(diǎn)是網(wǎng)頁(yè)解析Python編寫(xiě)程序非常方便，著名的Python爬蟲(chóng)有scratch等

java和python在爬蟲(chóng)方面的優(yōu)勢(shì)和劣勢(shì)是什么？

Python

強(qiáng)大的網(wǎng)絡(luò)功能，模擬登陸，解析JavaScript，缺點(diǎn)是網(wǎng)頁(yè)解析Python編寫(xiě)程序非常方便，著名的Python爬蟲(chóng)有scratch等

Java

Java有很多解析器，對(duì)網(wǎng)頁(yè)的解析支持非常好，缺點(diǎn)是有網(wǎng)絡(luò)上有很多Java開(kāi)源爬蟲(chóng)，比如nutch，中國(guó)有優(yōu)秀的webmagicjava解析器，比如Htmlparser和jsoup，可以滿足Java和python的通用需求。如果需要模擬登陸和反采集，選擇python更方便。如果需要處理復(fù)雜的網(wǎng)頁(yè)，解析網(wǎng)頁(yè)內(nèi)容生成結(jié)構(gòu)化數(shù)據(jù)或精細(xì)解析網(wǎng)頁(yè)內(nèi)容，可以選擇Java。

Java大數(shù)據(jù)能從事什么樣的工作，工資如何？

作為一名it從業(yè)者和教育家，讓我來(lái)回答這個(gè)問(wèn)題。

首先，Java大數(shù)據(jù)通常是指使用Java語(yǔ)言完成大數(shù)據(jù)開(kāi)發(fā)任務(wù)，所以主要崗位集中在開(kāi)發(fā)崗位，包括大數(shù)據(jù)平臺(tái)開(kāi)發(fā)和大數(shù)據(jù)應(yīng)用開(kāi)發(fā)。另外，雖然用java來(lái)完成大數(shù)據(jù)分析比較麻煩，但也完全有可能。

大數(shù)據(jù)平臺(tái)開(kāi)發(fā)崗位屬于研發(fā)級(jí)崗位。目前，隨著大數(shù)據(jù)領(lǐng)域大型科技（互聯(lián)網(wǎng)）公司的出現(xiàn)，大數(shù)據(jù)平臺(tái)開(kāi)發(fā)崗位的人才需求相對(duì)較大。從目前大數(shù)據(jù)領(lǐng)域的崗位增加值來(lái)看，大數(shù)據(jù)平臺(tái)開(kāi)發(fā)崗位增加值相對(duì)較高，增長(zhǎng)空間相對(duì)較大。目前，大數(shù)據(jù)平臺(tái)開(kāi)發(fā)崗位對(duì)從業(yè)者的要求比較高，很多團(tuán)隊(duì)要求從業(yè)者具有研究生學(xué)歷。從近兩年研究生在大數(shù)據(jù)方向的就業(yè)情況來(lái)看，從事大數(shù)據(jù)開(kāi)發(fā)工作是一種普遍的選擇。在目前算法類崗位較少的情況下，大數(shù)據(jù)開(kāi)發(fā)類崗位成為很多研究生的主要選擇。

與大數(shù)據(jù)平臺(tái)開(kāi)發(fā)崗位相比，大數(shù)據(jù)應(yīng)用開(kāi)發(fā)崗位的人才需求潛力相對(duì)較大。在工業(yè)互聯(lián)網(wǎng)的帶動(dòng)下，大量傳統(tǒng)行業(yè)企業(yè)紛紛云上，大數(shù)據(jù)應(yīng)用開(kāi)發(fā)的人才需求將逐步釋放。大數(shù)據(jù)應(yīng)用開(kāi)發(fā)對(duì)開(kāi)發(fā)者的要求沒(méi)有大數(shù)據(jù)平臺(tái)開(kāi)發(fā)那么高，但總體知識(shí)量也比較大，從業(yè)者需要具備一定的行業(yè)知識(shí)。從后增加值來(lái)看，當(dāng)前大數(shù)據(jù)應(yīng)用開(kāi)發(fā)的后增加值相對(duì)較高，但也直接涉及到特定的行業(yè)領(lǐng)域，如金融大數(shù)據(jù)、醫(yī)療大數(shù)據(jù)等領(lǐng)域。