V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
neochen13
V2EX  ›  问与答

想学习使用 flink 做实时统计订单数量,但是一搜发现相关知识曲线不是一般的长啊

  •  
  •   neochen13 · 2021-10-11 09:46:05 +08:00 via Android · 1687 次点击
    这是一个创建于 899 天前的主题,其中的信息可能已经有所发展或是发生改变。

    如题,要从 hadoop 开始学起,以及一系列知识点,那到 flink 都何年何月了都……

    12 条回复    2021-10-11 16:14:27 +08:00
    SbloodyS
        1
    SbloodyS  
       2021-10-11 09:51:22 +08:00
    flink 不走 on yarn 可以不依赖 hadoop
    wellsc
        2
    wellsc  
       2021-10-11 09:56:52 +08:00 via iPhone   ❤️ 1
    直接用,先不了解原理系列,想像成黑盒
    neochen13
        3
    neochen13  
    OP
       2021-10-11 10:06:57 +08:00 via Android
    @SbloodyS 新名词,头晕
    neochen13
        4
    neochen13  
    OP
       2021-10-11 10:07:31 +08:00 via Android
    @wellsc 欸,是想直接用的,就像先满足需要,一查发现水好深啊,难怪大数据需要专门一个部门
    0576coder
        5
    0576coder  
       2021-10-11 10:15:12 +08:00
    flink 也可以直接 jar 包运行的,可以先不管 hadoop 那一套 直接订阅 mysql 的 binlog 应该就能实时统计了
    YaPo
        6
    YaPo  
       2021-10-11 10:18:44 +08:00
    初学直接用 standalone 模式跑,如果数据量不大不依赖 hadoop 也可以的
    SbloodyS
        7
    SbloodyS  
       2021-10-11 10:59:22 +08:00
    @neochen13 刚开始 Docker 起个 standalone 搞搞很容易上手的
    bk201
        8
    bk201  
       2021-10-11 11:04:33 +08:00
    我觉得缺什么用什么,遇到问题再去查。
    giiiiiithub
        9
    giiiiiithub  
       2021-10-11 11:09:41 +08:00
    环境先搭建起来
    dtgxx
        10
    dtgxx  
       2021-10-11 15:17:04 +08:00
    是的,大数据开发知识点很多,这是个岗位,和 Java 、C 工程师一样的岗位,不是你一下就能学会的,你对 flink 不了解,啥也不学虽然可以用,但是遇到问题你解决不了,你需要大数据开发的知识储备。
    neochen13
        11
    neochen13  
    OP
       2021-10-11 15:52:57 +08:00 via Android
    @dtgxx 欸,我是 java 开发,只能眼馋了
    neochen13
        12
    neochen13  
    OP
       2021-10-11 16:14:27 +08:00 via Android
    大佬们可以推荐一些大数据的书籍吗
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5474 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 08:27 · PVG 16:27 · LAX 01:27 · JFK 04:27
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.