V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
howfree
V2EX  ›  程序员

有没有 bro 是 Java 转大数据成功的

  •  
  •   howfree · 95 天前 · 2463 次点击
    这是一个创建于 95 天前的主题,其中的信息可能已经有所发展或是发生改变。
    1.主要是想听一些前辈的成功例子,也给自己一些方向;
    2.自己搭建过实时数仓的 demo ,技术栈是 hadoop 、flink 、kafka 、flume 、maxwell 这些;
    3.除了 java,勉强能使用 python ,能使用 pytorch 、tensorflow 、pandas 、matplotlib;
    4.做过的项目中有使用到 flink-cdc 、canal 、flink 、es 、kafka 这些和大数据有关的技术;
    5.k8s 、jinkens 、docker 自己也能用,更多的是自己做的 demo 中会使用,生产项目中还是运维负责 CI/CD 。
    18 条回复    2024-01-24 16:36:21 +08:00
    BBCCBB
        1
    BBCCBB  
       95 天前
    转去大数据写 sql 吗? 🐶
    howfree
        2
    howfree  
    OP
       95 天前
    @BBCCBB 也不全是 sql boy 吧
    leo6668
        3
    leo6668  
       95 天前
    大数据还不如你搞 java
    wangyiyi10
        4
    wangyiyi10  
       95 天前
    大数据也不是写 SQL 的吧,至少我很少写 SQL 。
    如果做纯数据开发,写 SQL 确实没啥意思。
    如果做数据平台开发,其实和做后端没有特别大的区别,只是要对大数据的一些中间件原理要比较熟悉。
    waytodelay
        5
    waytodelay  
       95 天前
    主 java ,被迫做过 sql boy ,那不是一般的痛苦。

    如果是其他路子那就不清楚了
    wdmcode
        6
    wdmcode  
       95 天前
    找偏向研发大数据平台的公司,例如星环之类的数据平台厂商。
    大数据组件要会看源码,Hadoop 、flink 这些组件的源码都要了解。
    BBCCBB
        7
    BBCCBB  
       95 天前
    感觉通过换工作这种方式很难转, 因为没经验. 但如果你公司内部刚好需要人, 倒是可以转岗过去..
    howfree
        8
    howfree  
    OP
       95 天前
    @BBCCBB 公司都要没了
    LeeReamond
        9
    LeeReamond  
       95 天前 via Android
    @waytodelay 不是吧兄弟,带薪拉屎还痛苦?
    dlmy
        10
    dlmy  
       95 天前
    几年前,Java 转大数据成功,现在大数据还不如 Java 。领导说招不到大数据方面的人才,叫我先过去顶一顶,谁知道我变成了大数据团队的二把手。
    cmhonker
        11
    cmhonker  
       95 天前
    大数据已死,有事烧纸
    waytodelay
        12
    waytodelay  
       95 天前
    @LeeReamond
    java 接口写完跑个测试一会儿出结果,sql boy...
    而且报表出来也体现不出你的能力水平,不好去做晋升答辩,真的痛苦
    levelworm
        13
    levelworm  
       95 天前
    不如做后端。大数据太窄了。后端转其他方向很容易,大数据还得先转出来才好继续转。除非你本来就是做数据工程的。
    vincent7245
        14
    vincent7245  
       94 天前
    Java 后端和大数据本来就是一家,只是业务不同,使用的框架不同而已。当然 sqlboy 除外
    Part2
        15
    Part2  
       94 天前
    前同事培训 6 个月转了大数据,现在天天写 sql ,工资涨了 1.5 倍吧
    howfree
        16
    howfree  
    OP
       94 天前
    @Part2 简历造假吗?
    fengdw
        17
    fengdw  
       94 天前
    @dlmy 现在大模型起来之后, 按理来说不是数据会更重要, 一些大数据岗位不应该是更多吗, 为什么说还不如 java
    dlmy
        18
    dlmy  
       94 天前
    @fengdw 现在绝大多数公司都在降本增效,真实情况是一部分 Java 兼职前端开发工作,一部分 Java 兼职测试工作,一部分 Java 兼职运维工作,一部分 Java 兼职大数据相关工作。整个大数据团队只留下几个核心大佬,其他的活全部让 Java 过来顶,哪还有什么大数据岗位呢?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1117 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 18:06 · PVG 02:06 · LAX 11:06 · JFK 14:06
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.