GreatSQL Rapid引擎正式上线!

原创
02/04 14:06
阅读数 39
*   G r e a t S Q L 使


Rapid引擎简述

GreatSQL 8.0.32-25版本开始,新增Rapid存储引擎,该引擎使得GreatSQL能满足联机分析(OLAP)查询请求。

Rapid引擎采用插件(Plugin)方式嵌入GreatSQL中,可以在线动态安装或卸载。

Rapid引擎不会直接面对客户端和应用程序,用户无需修改原有的数据访问方式。它是一个无共享、内存化、混合列式存储的查询处理引擎,其设计目的是为了高性能的处理分析型查询。

Rapid引擎整体架构如下图所示:

  • Rapid引擎的核心代码是采用C++11开发,该引擎没有任何其他的依赖。
  • Rapid引擎适用于OLAP场景,它采用向量化计算技术,充分利用CPU SIMD技术。
  • Rapid引擎内部采用DataBlocks存储结构,这是一种兼顾OLTP和OLAP的压缩存储结构。其数据存储的基本格式:RowGroup based Storage。存储引擎将一个表的数据按行划分为多个RowGroup的组合,每个RowGroup最大存储122880行,内部数据按列进行存储。
  • Rapid内部是一个基于矢量化推送的模型(vectorized push-based model),在执行过程中,向量(vector)会在各个操作符之间流转,而不是一个个元组(tuple),采用了 Morsel驱动并行实现方式,将一个执行计划切分成多个管道(pipeline),每个管道采用 push-based的方式进行数据传递和调用。

性能表现参考

TPC-H测试表现

GreatSQL Rapid引擎性能表现优异,在32C64G测试机环境下,TPC-H 100G测试中22条SQL总耗时仅需不到80秒。下面是和其他类似产品的对比数据,仅供参考(测试时间:2024.1.31):

数据压缩率

下面是几个不同TPC-H数据量级的压缩率数据:

TPC-H仓库大小 InnoDB引擎数据文件大小 Rapid引擎数据文件大小 压缩率
TPC-H 1GB 2003026076 276574208 7.24
TPC-H 100GB 184570593436 28728373248 6.42
TPC-H 500GB 1167795142848 146723045376 7.96

经过GreatSQL社区的测试分析可以看出,相较于InnoDB存储引擎,Rapid存储引擎在存储效率上获得了极大提升。在存放相同的数据集时,Rapid的数据文件所需要的空间仅为InnoDB的6~7分之1,大约降低了85%左右。

线上发布会

Rapid引擎经过GreatSQL研发团队的努力开发和打磨,实现了高性能和稳定性。Rapid引擎将大幅提升GreatSQL的查询能力,为更好介绍Rapid引擎,将于2024年2月4日下午15:00召开线上发布会,欢迎各位前来聆听探讨~ 

会议时间:2024年2月4日下午15:00 

报名链接:https://meeting.tencent.com/dw/BMCMualFC1ev

下载体验Rapid存储引擎

全新Rapid存储引擎已正式发布啦!它不仅拥有极致的压缩率,还具备惊人的查询能力。如果您想体验一下Rapid引擎的独特魅力,现在就可以点击下面的链接免费下载最新版本的GreatSQL试用:

GreatSQL 8.0.32-25 Rapid引擎下载链接:https://gitee.com/GreatSQL/GreatSQL/releases/tag/GreatSQL-8.0.32-25

想了解更多Rapid存储引擎可以参考用户手册:
https://greatsql.cn/docs/8032-25/user-manual/5-enhance/5-1-highperf-rapid-engine.html

快来亲自感受Rapid的魅力吧!如果在试用过程中有任何问题,也欢迎在我们的社区发帖提问!


Enjoy GreatSQL :)

<Great SQL  2023快闪总结>
<关于 Great SQL >

GreatSQL数据库是一款开源免费数据库,可在普通硬件上满足金融级应用场景,具有高可用、高性能、高兼容、高安全等特性,可作为MySQL或Percona Server for MySQL的理想可选替换。

💻社区官网:  https://greatsql.cn/ 
Gitee   https://gitee.com/GreatSQL/GreatSQL
GitHub  https://github.com/GreatSQL/

🆙BiliBili  : https://space.bilibili.com/1363850082

(对文章有疑问或见解可去社区官网提出哦~)

加入微信交流群
加入QQ交流群

想看更多技术好文,点个"在看"吧!

本文分享自微信公众号 - GreatSQL社区(GreatSQL)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

展开阅读全文
加载中
点击引领话题📣 发布并加入讨论🔥
打赏
0 评论
0 收藏
0
分享
返回顶部
顶部