第一天:spark和Hadoop的比较和介绍

spark能替代hadoop么?


从截图中可以看到整个hadoop的架构,Spark只能替代Hadoop的一部分,也就是MapReduce,和Hive查询引擎,spark身是不提供大数据的存储的!

spark VS hadoop计算过程

spark 整体架构

spark 的特点

spark SQL 和Hive

spark streaming VS storm

spark的个人使用体会

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • Spark是什么? Spark,是一种通用的大数据计算框架,正如传统大数据技术Hadoop的MapReduce、H...
    义焃阅读 4,459评论 0 5
  • Zookeeper用于集群主备切换。 YARN让集群具备更好的扩展性。 Spark没有存储能力。 Spark的Ma...
    Yobhel阅读 12,115评论 0 34
  • 1 Spark设计目的 设计的目的就是能快速处理多种场景下的大数据问题,能高效挖掘大数据中的价值,从而为业务发展提...
    小小少年Boy阅读 4,590评论 0 5
  • 课程一、大数据运维之Linux基础本部分是基础课程,帮大家进入大数据领域打好Linux基础,以便更好地学习Hado...
    101之歌阅读 5,438评论 0 2
  • 抱歉 我对这个世界真的没有太大的野心,我只想过完我平凡的一生,该努力时努力,该放手时我会自觉退出 活着,只是为...
    淮亭阅读 1,211评论 0 1

友情链接更多精彩内容