抛弃Spark?Flink会是下一代大数据计算引擎吗?

作者 : 开心源码 本文共353个字,预计阅读时间需要1分钟 发布时间: 2022-05-12 共137人阅读

Apache Spark是目前应用最广泛、最流行的大数据计算平台之一,在2.X版本中,Apache Spark已经开始摒弃RDD的数据模型,采用Spark SQL的Dataset作为统一的数据模型来构建更加高效的计算框架。然而,2015年成为Apache顶级项目的Apache Flink却被很多人认为是未来最有可能取代Spark的新一代大数据计算引擎。本文将简单详情二者的区别以及为什么会有这种说法。

Spark的流行除了本身是一个很优秀的框架外也有少量大数据生态的因素。众所周知,尽管MapReduce框架开启了大数据批解决的时代,但是由于自身的限制导致编程的灵活性受到很大影响,而Spark一开始采用的RDD数据模型则有更加高效灵活的编程方式,并且支持内存计算,这使得Spark更受欢迎。

抛弃Spark?Flink会是下一代大数据计算引擎吗?

复杂的Hadoop生态

说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 抛弃Spark?Flink会是下一代大数据计算引擎吗?

发表回复