Hadoop HA集群 与 开发环境部署
每一次 Hadoop 生态的更新都是如此令人激动
像是 hadoop3x 精简了内核,spark3 在调用 R 语言的 UDF 方面,速度提升了 40 倍
所以该文章肯定得配备上最新的生态
hadoop 生态简介
期待目标
环境
OS :
CentOS 7.4
组件:
Hadoop 3x 及生态
Yarn
Mapreduce
HDFS
Zookeeper 3.6.3
可选项
Hive
Flume 1.9
Sqoop 2
kafka 2x
Spark 3x
...
uiuing.hashnode.dev11 min read