2019-10-08 大数据开发进阶之路

市场需要的水平

  • 熟练掌握Linux、SQL与Hive SQL
  • 掌握Hadoop生态主流技术,如HDFS/MapRedunce/Yarn/HBase/Flume等
  • 掌握Spark生态核心技术,如Spark架构/RDD转换算子/行动算子/持久化算子/任务调度/SparkStreaming等
  • 能够对崭新的问题进行建模分析,使用一直只是进行解决
  • 掌握大数据平台调优技能,源码阅读技巧
  • 具备应对BAT级别相关岗位面试能力

学Java转大数据和数据挖掘,规划学习路线

第一阶段:磨基础
Linux基础/Hbase/Hive/Scala/Spark

第二阶段:收地盘
Hadoop/Hbase/Hive/Scala/Spark

第三阶段:攻算法
Python/R,数据挖掘、机器学习基础

第四阶段:识架构
看书、看源码、跟大牛学习、学习大数据平台各项性能调优、数据治理、集群架构


夜深了,未完待续。。。

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • Zookeeper用于集群主备切换。 YARN让集群具备更好的扩展性。 Spark没有存储能力。 Spark的Ma...
    Yobhel阅读 12,127评论 0 34
  • 原来今天是11月11日,真是个好日子。 今日宜相离, 今夕宜相思, 今夜宜睡眠, 晚安的世界。
    沐可白白阅读 2,299评论 0 0
  • 风光如画,大明谷,天地精华齐聚。 水暖池清,宜沐浴,同享悠然情趣。 “鲜奶”凝脂,“生姜”活血,“老醋”通经路②。...
    千年一梦OK阅读 4,729评论 20 47
  • 记得jj有一首歌叫,不为谁而做的歌。当旁人问到为什么这个名字的时候,jj以一种感激的姿态告诉我们。记得看这个mv的...
    欣挽其辞阅读 1,517评论 4 0
  • 郑璐 宜昌 焦点网络中级七期 原创持续分享第233天 每天充实的忙碌着,忙碌着学习,忙碌着自己喜欢的事情,却忽视...
    迷你旅客阅读 2,586评论 2 0

友情链接更多精彩内容