视频: Apache Bigtop, a crash course in deploying a Hadoop bigdata - Roman Shaposhnik, Konstantin Boudnik 2024
为了帮助您开始使用Hadoop,下面介绍如何在自己的笔记本电脑上快速下载和设置Hadoop 。您的集群将在虚拟机上以伪分布模式运行,因此您不需要特殊的硬件。
虚拟机 (VM)是可以在真实计算机上运行的模拟计算机。例如,您可以在笔记本电脑上运行一个“播放”虚拟机的程序,该程序会打开一个窗口,看起来像是在运行另一台电脑。实际上,假装电脑正在你的真实电脑内运行。
<! --1 - >你将会下载一个虚拟机,在运行它的时候,你将会安装Hadoop。
如果你想组装你自己的Hadoop组件,Apache Bigtop是一个很好的选择。 Bigtop为您收集核心Hadoop组件,并确保您的配置能够正常工作。 Apache Bigtop是一个100%的开源发行版。
Bigtop的主要目标 - 就像Hadoop一样,Apache本身就是一个Apache项目,其目的是围绕Apache Hadoop生态系统中的项目打包,部署和集成构建一个社区。重点是整个系统而不是单个项目。
<!使用Bigtop,您可以轻松安装和部署Hadoop组件,而无需在特定的分布中跟踪它们,并将其与特定的Hadoop版本进行匹配。随着Hadoop组件的新版本发布,它们有时不能用于其他项目的最新版本。如果你自己做,重要的测试是必需的。使用Bigtop(或商业化的Hadoop版本),您可以相信Hadoop专家已经为您做了这个测试。为了让您了解Bigtop的扩展性,请参阅Bigtop中包含的所有组件的列表:<! Apache Hadoop
Apache Hadoop
Apache Hook-
Apache Hadoop
-
Apache Hadoop
-
Apache Hadoop
-
Apache Hadoop
-
Pig
-
Apache Solr
-
Apache Sqoop
-
Apache Whirr
-
Apache Zookeeper
-
Cloudera Hue
-
LinkedIn DataFu
-
这个Hadoop生态系统项目的集合大致相当广泛,主要和次要项目都包括在内。 Apache Bigtop正在不断发展。