有什么部署 Hadoop 的主流方法么

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

› Apache Hadoop

› Hortonworks Sandbox

› Intel Hadoop Distribution

› Treasure Data

这是一个创建于 1296 天前的主题，其中的信息可能已经有所发展或是发生改变。

CDH 从今年开始不再免费，但好像能下载 6.3.3 及以前版本现在部署 hadoop 、hive 、Spark 有什么主流方法么之前看帖子有 hadoop on k8s 但查了资料貌似不是官方支持的方法，HDFS 和 k8s 貌似也不兼容

难道要自己下 Apache 的发行版，纯手工部署么

hadoop

k8s

部署

貌似

12 条回复 • 2021-08-04 09:26:26 +08:00

liprais

2021-04-29 17:49:31 +08:00 via iPhone

这东西几年都不升级的，就 cdh 呗

Mindzy

2021-04-29 17:53:29 +08:00

@liprais 主要之前部署的挂了，打算全清了重搞，数据也无所谓了

billlee

2021-04-29 20:54:48 +08:00

直接 systemd 拉起

wwwarriorrr

2021-04-29 20:58:25 +08:00

Ambari

francisdu

2021-04-29 20:59:14 +08:00 via Android

CDH 是免费的，CDP 是没有免费版的了

ClericPy

2021-04-29 21:38:41 +08:00

公司里买的 aws 的 EMR, 那贵的岂止是三个我擦...

不过运维成本减轻了不少, 有点好奇其他主流部署走的什么路子

apisces

2021-04-30 09:21:50 +08:00

我司是 HDP

cstj0505

2021-04-30 12:53:33 +08:00 via Android

其实免费的没了，有也是旧版，cdh 和 hdp 合并，cdh 也不免费了

Mindzy

2021-04-30 15:52:31 +08:00

@francisdu 都不免费了，从 6.3.4，现在下载之前的免费版本，都需要注册账号了，之前承诺的 Cloudera Manager 开源也没开。

搜了一圈貌似开源免费的 Hadoop 生态的发行版都已经死了

francisdu

2021-04-30 17:58:19 +08:00 via Android

@Mindzy 😂😂😂这么坑吗，好久没关注了

CaptainD

2021-08-03 15:29:23 +08:00

目前 CDH 应该没有免费版了，有什么其他方法吗

Mindzy

2021-08-04 09:26:26 +08:00

@CaptainD 没有，网上找网盘的资源吧…