V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Mindzy
V2EX  ›  Hadoop

有什么部署 Hadoop 的主流方法么

  •  
  •   Mindzy · 2021-04-29 17:48:34 +08:00 · 2588 次点击
    这是一个创建于 1064 天前的主题,其中的信息可能已经有所发展或是发生改变。

    CDH 从今年开始不再免费,但好像能下载 6.3.3 及以前版本 现在部署 hadoop 、hive 、Spark 有什么主流方法么 之前看帖子有 hadoop on k8s 但查了资料貌似不是官方支持的方法,HDFS 和 k8s 貌似也不兼容

    难道要自己下 Apache 的发行版,纯手工部署么

    12 条回复    2021-08-04 09:26:26 +08:00
    liprais
        1
    liprais  
       2021-04-29 17:49:31 +08:00 via iPhone
    这东西几年都不升级的,就 cdh 呗
    Mindzy
        2
    Mindzy  
    OP
       2021-04-29 17:53:29 +08:00
    @liprais 主要之前部署的挂了,打算全清了重搞,数据也无所谓了
    billlee
        3
    billlee  
       2021-04-29 20:54:48 +08:00
    直接 systemd 拉起
    wwwarriorrr
        4
    wwwarriorrr  
       2021-04-29 20:58:25 +08:00
    Ambari
    francisdu
        5
    francisdu  
       2021-04-29 20:59:14 +08:00 via Android
    CDH 是免费的,CDP 是没有免费版的了
    ClericPy
        6
    ClericPy  
       2021-04-29 21:38:41 +08:00
    公司里买的 aws 的 EMR, 那贵的岂止是三个我擦...

    不过运维成本减轻了不少, 有点好奇其他主流部署走的什么路子
    apisces
        7
    apisces  
       2021-04-30 09:21:50 +08:00
    我司是 HDP
    cstj0505
        8
    cstj0505  
       2021-04-30 12:53:33 +08:00 via Android
    其实免费的没了,有也是旧版,cdh 和 hdp 合并,cdh 也不免费了
    Mindzy
        9
    Mindzy  
    OP
       2021-04-30 15:52:31 +08:00
    @francisdu 都不免费了,从 6.3.4,现在下载之前的免费版本,都需要注册账号了,之前承诺的 Cloudera Manager 开源也没开。

    搜了一圈貌似开源免费的 Hadoop 生态的发行版都已经死了
    francisdu
        10
    francisdu  
       2021-04-30 17:58:19 +08:00 via Android
    @Mindzy 😂😂😂这么坑吗,好久没关注了
    CaptainD
        11
    CaptainD  
       2021-08-03 15:29:23 +08:00
    目前 CDH 应该没有免费版了,有什么其他方法吗
    Mindzy
        12
    Mindzy  
    OP
       2021-08-04 09:26:26 +08:00
    @CaptainD 没有,网上找网盘的资源吧…
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5740 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 06:09 · PVG 14:09 · LAX 23:09 · JFK 02:09
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.