HBase和Spark

Apache Spark是一個(gè)軟件框架，用于以分布式方式處理內(nèi)存中的數(shù)據(jù)，并在許多用例中替換MapReduce。

Spark本身超出了本文檔的范圍，有關(guān)Spark項(xiàng)目和子項(xiàng)目的更多信息，請(qǐng)參閱Spark站點(diǎn)。本文檔將重點(diǎn)介紹Spark和HBase之間的4個(gè)主要交互點(diǎn)。這些相互作用點(diǎn)是：

Basic Spark

能夠在Spark DAG中的任何位置建立HBase連接。

Spark Streaming

能夠在Spark Streaming應(yīng)用程序中的任何位置擁有HBase連接。

Spark Streaming

能夠直接寫入HBase HFiles，以便批量插入HBase

SparkSQL / DataFrames

能夠編寫SparkSQL，它使用HBase中表示的表。

本章的剩余部分將介紹所有這些交互點(diǎn)的示例。