Mindzy
V2EX  ›  Hadoop

有什么部署 Hadoop 的主流方法么

  •  
  •   Mindzy · Apr 29, 2021 · 4120 views
    This topic created in 1860 days ago, the information mentioned may be changed or developed.

    CDH 从今年开始不再免费,但好像能下载 6.3.3 及以前版本 现在部署 hadoop 、hive 、Spark 有什么主流方法么 之前看帖子有 hadoop on k8s 但查了资料貌似不是官方支持的方法,HDFS 和 k8s 貌似也不兼容

    难道要自己下 Apache 的发行版,纯手工部署么

    12 replies    2021-08-04 09:26:26 +08:00
    F281M6Dh8DXpD1g2
        1
    F281M6Dh8DXpD1g2  
       Apr 29, 2021 via iPhone
    这东西几年都不升级的,就 cdh 呗
    Mindzy
        2
    Mindzy  
    OP
       Apr 29, 2021
    @liprais 主要之前部署的挂了,打算全清了重搞,数据也无所谓了
    billlee
        3
    billlee  
       Apr 29, 2021
    直接 systemd 拉起
    wwwarriorrr
        4
    wwwarriorrr  
       Apr 29, 2021
    Ambari
    francisdu
        5
    francisdu  
       Apr 29, 2021 via Android
    CDH 是免费的,CDP 是没有免费版的了
    ClericPy
        6
    ClericPy  
       Apr 29, 2021
    公司里买的 aws 的 EMR, 那贵的岂止是三个我擦...

    不过运维成本减轻了不少, 有点好奇其他主流部署走的什么路子
    apisces
        7
    apisces  
       Apr 30, 2021
    我司是 HDP
    cstj0505
        8
    cstj0505  
       Apr 30, 2021 via Android
    其实免费的没了,有也是旧版,cdh 和 hdp 合并,cdh 也不免费了
    Mindzy
        9
    Mindzy  
    OP
       Apr 30, 2021
    @francisdu 都不免费了,从 6.3.4,现在下载之前的免费版本,都需要注册账号了,之前承诺的 Cloudera Manager 开源也没开。

    搜了一圈貌似开源免费的 Hadoop 生态的发行版都已经死了
    francisdu
        10
    francisdu  
       Apr 30, 2021 via Android
    @Mindzy 😂😂😂这么坑吗,好久没关注了
    CaptainD
        11
    CaptainD  
       Aug 3, 2021
    目前 CDH 应该没有免费版了,有什么其他方法吗
    Mindzy
        12
    Mindzy  
    OP
       Aug 4, 2021
    @CaptainD 没有,网上找网盘的资源吧…
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   6215 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 143ms · UTC 02:24 · PVG 10:24 · LAX 19:24 · JFK 22:24
    ♥ Do have faith in what you're doing.