hadoop和大數(shù)據(jù)的關(guān)系？和spark的關(guān)系？首先，大數(shù)據(jù)只是一個(gè)概念。一個(gè)簡(jiǎn)單的類(lèi)比可以說(shuō)Hadoop是一種實(shí)現(xiàn)大數(shù)據(jù)分析的架構(gòu)。其實(shí)，這與中國(guó)建設(shè)銀行和中國(guó)銀行的概念有些相似。中國(guó)建設(shè)銀行是一種

hadoop和大數(shù)據(jù)的關(guān)系？和spark的關(guān)系？

首先，大數(shù)據(jù)只是一個(gè)概念。一個(gè)簡(jiǎn)單的類(lèi)比可以說(shuō)Hadoop是一種實(shí)現(xiàn)大數(shù)據(jù)分析的架構(gòu)。其實(shí)，這與中國(guó)建設(shè)銀行和中國(guó)銀行的概念有些相似。中國(guó)建設(shè)銀行是一種商業(yè)銀行。在Hadoop之前，我們可以處理大數(shù)據(jù)。我們可以編寫(xiě)自己的程序來(lái)處理它。Java、Python等語(yǔ)言都可以根據(jù)處理來(lái)實(shí)現(xiàn)大數(shù)據(jù)，Hadoop是Java沉淀下來(lái)的架構(gòu)，它周?chē)幸粋€(gè)生態(tài)。所以很多人在談到大數(shù)據(jù)的時(shí)候都會(huì)談到Hadoop，Hadoop中有原生Apache、CDH、HDP等廠商的開(kāi)源版本。

Apache spark是一個(gè)快速通用的計(jì)算引擎，專(zhuān)為大規(guī)模數(shù)據(jù)處理而設(shè)計(jì)?？梢岳斫?，它是Hadoop的一個(gè)補(bǔ)充功能。

Hadoop與Spark的關(guān)系，Spark集群必須依賴(lài)Hadoop嗎？

它必須在Hadoop群集上。它的數(shù)據(jù)源是HDFS，它本質(zhì)上是一個(gè)基于yarn的計(jì)算框架，就像Mr.

hadoop與spark的區(qū)別是什么？

感謝您的邀請(qǐng)

！請(qǐng)看下面的圖片：

狹義的Hadoop，也就是原始版本：只有HDFS map reduce

未來(lái)會(huì)出現(xiàn)很多存儲(chǔ)、計(jì)算和管理框架。

如果我們比較它們，我們可以比較Hadoop map reduce和spark，因?yàn)樗鼈兪怯糜诖髷?shù)據(jù)分析的計(jì)算框架。

Spark有許多線路組件，它們更強(qiáng)大、更快。