如何基于Spark Streaming構(gòu)建實時計算平臺？Spark streaming是一個基于Spark的實時計算框架，它擴展了Spark處理大規(guī)模流數(shù)據(jù)的能力。spark流的優(yōu)點是它可以在1000

如何基于Spark Streaming構(gòu)建實時計算平臺？

Spark streaming是一個基于Spark的實時計算框架，它擴展了Spark處理大規(guī)模流數(shù)據(jù)的能力。spark流的優(yōu)點是它可以在1000個節(jié)點上以秒延遲運行。

采用基于內(nèi)存的spark作為執(zhí)行引擎，具有高效、容錯的特點。

可以集成批量處理和spark的交互式查詢。

它提供了一個簡單的界面，類似于復(fù)雜算法的批處理。

正是由于這個原因，spark-streaming受到了很多企業(yè)的追捧，在生產(chǎn)項目中得到了廣泛的應(yīng)用，但在使用過程中也存在一些熱點問題。

原文的詳細(xì)解釋：https://blog.csdn.net/GitChat/article/details/78050311

大數(shù)據(jù)處理為何選擇spark？