如何解決editlog文件過大的問題 hadoopjps主節(jié)點(diǎn)應(yīng)該要有哪些進(jìn)程?
hadoopjps主節(jié)點(diǎn)應(yīng)該要有哪些進(jìn)程?主節(jié)點(diǎn)有以下過程:1)NameNode是hadoop中的主服務(wù)器,它管理文件系統(tǒng)命名空間和對(duì)存儲(chǔ)在集群中的文件的訪問,并存儲(chǔ)元數(shù)據(jù)。2)Secondaryna
hadoopjps主節(jié)點(diǎn)應(yīng)該要有哪些進(jìn)程?
主節(jié)點(diǎn)有以下過程:
1)NameNode是hadoop中的主服務(wù)器,它管理文件系統(tǒng)命名空間和對(duì)存儲(chǔ)在集群中的文件的訪問,并存儲(chǔ)元數(shù)據(jù)。
2)Secondarynamenode它不是namenode的冗余守護(hù)進(jìn)程,但提供定期檢查點(diǎn)和清理任務(wù)。幫助NN合并editslog,減少NN的啟動(dòng)時(shí)間。
3)DataNode It負(fù)責(zé)管理連接到節(jié)點(diǎn)的存儲(chǔ)(一個(gè)集群中可以有多個(gè)節(jié)點(diǎn))。每個(gè)存儲(chǔ)數(shù)據(jù)的節(jié)點(diǎn)都運(yùn)行一個(gè)datanode守護(hù)進(jìn)程。
4)資源管理器(作業(yè))作業(yè)負(fù)責(zé)調(diào)度DataNode上的工作。每個(gè)DataNode都有一個(gè)TaskTracker,它執(zhí)行實(shí)際的工作。
5)節(jié)點(diǎn)管理器(TaskTracker)執(zhí)行任務(wù)。
6)當(dāng)6)DFSZKFailoverController高可用時(shí),負(fù)責(zé)監(jiān)控NN的狀態(tài),并及時(shí)將狀態(tài)信息寫入ZK。它通過一個(gè)獨(dú)立線程定期調(diào)用神經(jīng)網(wǎng)絡(luò)上的特定接口來(lái)獲取神經(jīng)網(wǎng)絡(luò)的健康狀態(tài)。FC也有權(quán)選擇誰(shuí)是主動(dòng)NN,因?yàn)樽疃嘀挥袃蓚€(gè)節(jié)點(diǎn),目前的選擇策略比較簡(jiǎn)單(先到先得,輪換)。
7)在7)JournalNod
WEB專用服務(wù)器的安全設(shè)置的實(shí)戰(zhàn)技巧?
刪除默認(rèn)站點(diǎn)的虛擬目錄,停止默認(rèn)網(wǎng)站,刪除對(duì)應(yīng)的文件目錄c: inetpub,配置所有站點(diǎn)的公共設(shè)置,設(shè)置相關(guān)的連接限制、帶寬設(shè)置、性能設(shè)置等設(shè)置。配置應(yīng)用映射,刪除所有不必要的應(yīng)用擴(kuò)展,只保留asp、php、cgi、pl、aspx應(yīng)用擴(kuò)展。對(duì)于php和cgi,建議使用isapi解析,exe解析會(huì)對(duì)安全性和性能有影響。用戶程序調(diào)試設(shè)置向用戶發(fā)送文本錯(cuò)誤消息。對(duì)于數(shù)據(jù)庫(kù),盡量使用mdb后綴,不要改成asp。您可以在IIS中設(shè)置mdb的擴(kuò)展映射,并使用不相關(guān)的dll文件(如C:WINNTsystem32inetsrvssinc.dll)來(lái)防止數(shù)據(jù)庫(kù)被下載。設(shè)置IIS的日志目錄并調(diào)整日志信息。設(shè)置發(fā)送文本錯(cuò)誤信息。修改403錯(cuò)誤頁(yè)面并將其轉(zhuǎn)到其他頁(yè)面可以阻止某些掃描儀的檢測(cè)。另外,為了隱藏系統(tǒng)信息,防止telnet到80端口泄露系統(tǒng)版本信息,IIS的banner信息可以通過winhex手動(dòng)修改,也可以使用banneredit等相關(guān)軟件修改。改變。對(duì)于目錄,用戶 的站點(diǎn),這里說明用戶 s FTP根目錄對(duì)應(yīng)wwwroot、database和logfiles三個(gè)文件,分別存儲(chǔ)站點(diǎn)的站點(diǎn)文件、數(shù)據(jù)庫(kù)備份和日志。如果發(fā)生入侵事件,可以為用戶所在的目錄設(shè)置特定的權(quán)限。;的站點(diǎn)位于。圖片所在的目錄只給列目錄權(quán)限,程序所在的目錄如果不需要生成文件(比如生成html的程序)就不給寫權(quán)限。因?yàn)樘摂M主機(jī)通??梢?不要對(duì)腳本安全性過于細(xì)致,更多的只能在方法用戶從腳本中提高權(quán)限時(shí)才能做到:asp安全設(shè)置:設(shè)置好權(quán)限和服務(wù)后,還需要做以下工作來(lái)防止ASP木馬。在cmd窗口中運(yùn)行以下命令:regsvr 32/U C:win ntsystem 32 wshom . ocxdelc:win ntsystem 32 wshom . ocxregsvr 32/U C:WINNTsystem32shell32.dll DELC:WINNTsystem32shell32.dll可以卸載組件,可以有效防止asp木馬通過wscript查看一些系統(tǒng)敏感信息或執(zhí)行命令以及使用木馬。另一種方法:可以取消上述文件的用戶權(quán)限,重啟IIS即可生效。但不推薦這種方法。此外,對(duì)于FSO,因?yàn)樾枰褂糜脩舫绦?,所以不能在服?wù)器上取消組件。這里只提到FSO的防范,但不需要在自動(dòng)打開空間的虛商服務(wù)器上使用,只適用于手動(dòng)打開的站點(diǎn)。你可以為需要FSO的站點(diǎn)和不需要的站點(diǎn)建立兩個(gè)組。;我不需要FSO。需要FSO的用戶組被允許執(zhí)行C:winntsystem32scrrun.dll文件,而不需要的用戶組被允許執(zhí)行。;不需要FSO不被允許。重新啟動(dòng)服務(wù)器將會(huì)生效。對(duì)于這樣的設(shè)置結(jié)合上面的權(quán)限設(shè)置,你會(huì)發(fā)現(xiàn)海洋木馬在這里已經(jīng)失去作用了!php的安全設(shè)置:默認(rèn)安裝的PHP需要注意以下問題:C:只給用戶讀權(quán)限。需要在系統(tǒng)中進(jìn)行如下設(shè)置:safe _ mode on register _ globalsofallow _ URL _ fopen off display _ errors off magic _ "es _ gpcon[默認(rèn)為on,但需要再次檢查]open _ basedir web directory disable _ functions passthru,exec,shell_exec,system,phpinfo,get _ CFG _ va。將r,popen,chmod _dcom的默認(rèn)設(shè)置修改為false【修改前,應(yīng)取消之前的mysql安全設(shè)置】:如果服務(wù)器上啟用了MySQL數(shù)據(jù)庫(kù),MySQL數(shù)據(jù)庫(kù)需要注意的安全設(shè)置是:刪除MySQL中所有默認(rèn)用戶,只保留本地root帳號(hào),并為root用戶添加復(fù)雜的密碼。在給予普通用戶updatedeletealertcreatedrop的權(quán)限時(shí),僅限于特定的數(shù)據(jù)庫(kù),尤其是避免普通客戶擁有操作mysql數(shù)據(jù)庫(kù)的權(quán)限。清單,取消不必要的用戶hutdown_priv、relo ad_priv、process_priv和File_priv的權(quán)限,可能會(huì)泄露更多的服務(wù)器信息,包括mysql以外的其他信息。您可以為mysql設(shè)置一個(gè)啟動(dòng)用戶,該用戶只對(duì)mysql目錄擁有權(quán)限。設(shè)置安裝目錄的數(shù)據(jù)數(shù)據(jù)庫(kù)的權(quán)限(該目錄存儲(chǔ)mysql數(shù)據(jù)庫(kù)的數(shù)據(jù)信息)。對(duì)于mysql安裝目錄,給用戶添加讀取、列目錄和執(zhí)行權(quán)限。Serv-u安全問題:安裝程序盡量采用最新版本,避免使用默認(rèn)安裝目錄,設(shè)置serv-u目錄所在位置的權(quán)限,設(shè)置復(fù)雜的管理員密碼。修改serv-u的banner信息,設(shè)置被動(dòng)模式端口范圍(4001-4003),在本地服務(wù)器設(shè)置中進(jìn)行相關(guān)安全設(shè)置,包括檢查匿名密碼、禁用加班調(diào)度、攔截 "FTP反彈和攻擊和FXP,并攔截10分鐘內(nèi)30秒內(nèi)連接三次以上的用戶。域中的設(shè)置有:需要復(fù)雜密碼,目錄中只使用小寫字母,取消使用MDTM命令更改文件的日期在高級(jí)中設(shè)置。更改serv-u的啟動(dòng)用戶:在系統(tǒng)中新建一個(gè)用戶,設(shè)置一個(gè)復(fù)雜的密碼,不屬于任何組。授予用戶對(duì)servu安裝目錄的完全控制權(quán)限。要建立一個(gè)ftp根目錄,您需要給這個(gè)用戶對(duì)目錄的完全控制權(quán),因?yàn)樗蠪TP用戶上傳、刪除和更改文件都是從這個(gè)用戶繼承的。;否則他們可以 不要操作文件。另外,需要給用戶這個(gè)目錄上面的父目錄的讀取權(quán)限,否則連接時(shí)會(huì)出現(xiàn)530未登錄,主目錄不存在。比如測(cè)試時(shí)ftp根目錄為D: soft時(shí),必須賦予用戶對(duì)驅(qū)動(dòng)器D的讀取權(quán)限,為了安全起見,會(huì)取消驅(qū)動(dòng)器D上其他文件夾的繼承權(quán)限。一般使用默認(rèn)系統(tǒng)啟動(dòng)不會(huì)有這些問題,因?yàn)橄到y(tǒng)一般都有這些權(quán)限。