大数据开发指南

作者: sunTengSt | 来源:发表于2018-06-01 10:27 被阅读46次

    package 数据开发/大数据开发/hadoop开发架构:

    数据开发(面试及工作)技能
    

    public class(终极目标):

    技术生态圈——概念、使用场景、api开发、底层原理、优劣、如何优化、熟读源码并二次开发、社区同步。
    

    class java:

    精通java(java基础知识 + java通用类库以及框架)
    
    精通jvm(gc原理,gc算法,gc排查及优化)
    
    精通多线程
    
    osgi框架
    
    数据结构与算法(#算法导论#LeetCode#)
    
    工具类(git、maven、sbt等等)
    
    ........
    

    class sql:

    mysql
    
    hbase/Cassandra
    
    redis
    
    ........
    

    class hadoop

    hdfs
    
    mapreduce
    
    yarn
    
    zookeeper
    
    hbase
    
    flume
    
    kafka
    
    sqoop
    
    solr(solrcloud)
    
    ........
    
    `**集群搭建、shell开发,api开发,原理机制,性能优化,熟读源码,二次开发。**`
    

    class sql-on-hadoop

    hive
    
    phoenix
    
    impala
    

    class streaming

    spark:

    scala
    
    spark-mllib
    
    spark-streaming
    
    spark-sql
    

    flink:

    ........
    

    class 分布式

    分布式开发
    

    main()

    概念、使用场景、api开发、底层原理、优劣、如何优化、熟读源码并二次开发
    

    学习指南:

    ============================================================
    技术参考书:


    3614146-7fb139fa92a1a11e.png

    相关文章

      网友评论

        本文标题:大数据开发指南

        本文链接:https://www.haomeiwen.com/subject/usuhsftx.html