Spark和Hadoop的对比_spark和hadoop的区别-CSDN博客

网站介绍:文章浏览阅读1.5w次,点赞3次,收藏33次。一、二者各方面比较HadoopSpark类型基础平台,包含计算、存储、调度分布式计算工具场景大规模数据集上的批处理迭代计算,交互式计算,流计算价格对机器要求低,便宜对内存有要求,相对较贵编程范式Map+Reduce,API较为底层,算法适应性差RDD组成DAG有向无环图,API较为顶层,方便使用数据存储结构MapReduce中间计算结果在HDFS磁盘上,延迟大RDD中间运算结果在内存中,延迟小运行方式Task以进程方式维护,任务启动_spark和hadoop的区别