Spark SQL 向量化执行引擎框架Gluten-Velox在AArch64使能和优化

原创

Apache Spark 是当前流行的开源数据处理引擎，Spark SQL 为用户提供可靠的查询计算解决方案。近期，Gluten 项目作为基于 Apache Arrow 的原生 SQL 引擎正式亮相，旨在增强 Spark SQL 计算性能。与此同时，多个向量化 SQL 引擎和更加活跃的开源社区也纷纷涌现。其中 Velox 项目尤为引人注目，它提供了向量化数据库加速库。本议题简要介绍了 Gluten-Velox 框架的概况和原理，同步 Gluten-Velox 社区在 AArch64平台上的使能状态，并通过一个 Velox 的优化案例，展示此 Spark SQL 向量化执行引擎框架在 AArch64 上的潜力。