SQL还是那个SQL么?

作者 : 开心源码 本文共908个字,预计阅读时间需要3分钟 发布时间: 2022-05-12 共153人阅读

前言

今天MLSQL群里有个小伙伴问到,能把Spark, Flink 这些框架运行在黑莓上么?

我答复道:可以作为一个内置SQL计算引擎嵌入(不是数据库),其余可能没啥用了。

不过这又引起了我的另外两个思考,第一个是,Spark真的能(或者者有必要)跑在移动设施上么?第二个问题是,在传统Web/App开发领域,SQL只是数据库的一个操作语言(DSL),但是在大数据里,SQL已经远远超越了数据库操作语言的范畴,而是数据解决的标准语言,而在MLSQL中,SQL被发挥到极致,是一切数据解决的核心语言,无论爬虫,数据解决,流式,ML(AI)都是用SQL做交互的。 那么为什么在大数据领域SQL会有这种变革呢而在Web/App开发领域没有这种事情发生呢?

Spark真的能(或者者有必要)跑在移动设施上么

首先,Spark经过改造完全可以跑在移动设施上的,其次是这也是有必要的。之前跟挖财的小伙伴交流,他们用改造过的Spark引擎可以把少量小数据量的复杂SQL计算缩小到几毫秒,那么假如将该引擎移植到Ios/Android/BlackBerry, 根据我前面提到的第二个思考,我们不再把SQL当做一个数据库操作语言,而是数据解决语言,我在移动设施上完全可以把数据解决一律换到spark引擎上,而且可以实现解决逻辑的热更新(移动端连接服务器,升级SQL脚本)就能升级数据解决逻辑。会不会功耗过高?几毫秒的CPU(GPU/AI芯片)而已。

对 Web/App小伙伴思维模式的冲击

我们知道以前在做Web的时候,分库分表的痛点是查询的时候很难受。而早期Spark无法被Web/App的小伙伴使用,由于他做不到毫秒级的计算推迟。但是有针对性的对Spark做优化(不再针对大数据,而是针对Web/App),得益于Spark的多数据源支持,以及高效的SQL计算引擎,分表分库查询不在是噩梦,我们可以轻易实现。事实上,tidb已经是这么做的了。这是以第一点。

第二点是,很多业务解决环节,是不是都能通过SQL来解决呢?不能说大部分,但是应该相当一部分是可以不用写代码了,而是通过SQL来完成的,那这也意味着,我们可以热升级的好处。所有数据解决无非如下三种模式:

SQL还是那个SQL么?

说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » SQL还是那个SQL么?

发表回复