在过去的几年中,大数据工程师一直都是硅谷最炙手可热的职位之一。随着人工智能的崛起,与之高度相关的大数据工程师的录取标准也水涨船高。那么,作为你一个合格的大数据工程师,以下是十点重要技能,你都点亮了吗?
知道如何利用Hadoop以及其他相关技术设计分布式系统
知道如何利用Pig和Spark创造能够在Hadoop集群上运算数据的脚本
知道如何利用HBase Cassandra和MongoDB来分析非关系型数据库
知道什么才是在不同状况下合适的数据存储技术
知道如何利用Kafka Sqoop和Flume等技术将数据发布到Hadoop集群上
知道如何利用HDFS和MapReduce来存储分析大规模的数据
知道如何利用Hive和MySQL分析关系型数据
知道如何利用Drill Phoenix和Presto查询数据
理解YARN Tex Mesos Zookeeper Zepplin Hue和Oozie是如何管理Hadoop集群的
利用Spark Streaming Flink和Storm消耗流数据
想成为大数据工程师的你还有技能没有点亮,那么,是时候开始了!
课程目的
4个月课程带你学习大数据工程师的当下流行技术。掌握大数据工程师必备的Hadoop生态体系、大规模实时数据分析、并深入了解搜索广告平台搭建,最终完成企业级项目实战。
我们将通过5个项目实战,带你完全掌握和达到业界开发水平!
项目介绍
Project 1
某企业微博社交数据分析平台:基于微博数据,深入挖掘微博所包含的大数据意义
Project 2
某企业电商数据运营分析平台:通过大数据技术进行电商数据深入的挖掘与分析使用
Project 3
某金融企业用户交易行为分析大数据平台: 通过多个交易系统的用户及交易数据实现用户对汽车保险购买意向的预测
Project 4
某企业运营数据实时指挥室:通过大数据技术构建运营数据实时指挥室,让企业实时监控各个门店经营及运转情况。
Project 5
某运营商O域用户行为分析项目:利用用户活动日志数据精准分析移动运营商的用户行为。
网友评论