V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
nicon
V2EX  ›  问与答

JavaWeb 开发两年,想转大数据,希望大家建给点建议

  •  1
     
  •   nicon · 2019-04-28 09:27:11 +08:00 · 6194 次点击
    这是一个创建于 2068 天前的主题,其中的信息可能已经有所发展或是发生改变。

    做 java 开发两年了,感觉没啥意思了,想转大数据,但感觉又无从下手,望广大 V 友给点建议

    11 条回复    2019-04-28 19:37:12 +08:00
    leonme
        1
    leonme  
       2019-04-28 09:45:58 +08:00 via Android
    如果不想当个 sql boy,继续做后端好了
    p2pCoder
        2
    p2pCoder  
       2019-04-28 09:59:16 +08:00
    现在很多的后端业务系统都是有大数据需求的
    我转行两年半的轨迹
    先在 一家 p2p 公司做理财
    然后在一家 p2p 公司做大数据风控系统后台开发,开始接触大数据相关
    现在在一家手机公司做推荐机器学习平台开发
    做了两年半,职位都是后台开发,语言差不多都是 java,也不是大数据开发,但是由于业务的原因,大数据和 AI 业务也做了很多
    楼主也可以从业务入手
    SwagXin
        3
    SwagXin  
       2019-04-28 11:03:15 +08:00
    不懂帮顶,不过搞大数据的编程语言主要就是 Java 和 python 吧
    fareware
        4
    fareware  
       2019-04-28 11:08:47 +08:00
    现在大部分还是换一种方式写‘ SQL ’。java,Python,Scala。可以写搭下 Hadoop。谢谢 mr
    passerbytiny
        5
    passerbytiny  
       2019-04-28 11:35:02 +08:00
    之前有 5 年 Java,已经做了 1 年大数据方向研发的人的建议:别转。

    我现在实际上做得是 SQL 开发。大数据是所有公司都想要的(包括屁大的小公司),但若没有成熟的技术团队支持,最多只能做一下口号上的大数据,实际上还是传统信息系统的小数据。

    按照一年以来的经验,大数据技术团队的组成部分是:运维和架构、数据分析员、外围程序开发。第一个肯定得老手来,第二个实际上是数学方面的科学家,研究生学历是最低要求,第三个跟传统信息系统的 Java 开发没多大区别。
    glfpes
        6
    glfpes  
       2019-04-28 12:17:48 +08:00 via Android
    大数据开发已经和后台开发耦合到一块了。因为现在不管是日志的处理还是 pingback 分析等工作都离不开 hadoop 生态
    nicon
        7
    nicon  
    OP
       2019-04-28 12:30:58 +08:00
    @leonme 什么意思呢,不太明白哎
    nicon
        8
    nicon  
    OP
       2019-04-28 12:34:37 +08:00
    @passerbytiny 大佬,你说的做 sql 开发是什么意思啊,不是用什么 spark,hadoop 框架之类的开发么,对这块不太了解,问的可能比较肤浅,望解答
    passerbytiny
        9
    passerbytiny  
       2019-04-28 12:53:30 +08:00
    @nicon #8 就是在关系数据库中做统计报表,本质上不是大数据。
    996icu
        10
    996icu  
       2019-04-28 15:03:30 +08:00
    楼主可以看下我的文章,有一些 Java 大数据开发的案例: https://blog.csdn.net/youbitch1
    zndbl
        11
    zndbl  
       2019-04-28 19:37:12 +08:00 via Android
    大数据就是多学几个框架,现在趋势是后台要 java 和大数据都干
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5792 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 06:14 · PVG 14:14 · LAX 22:14 · JFK 01:14
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.