Kyuubi

Apache Kyuubi是一个分布式多租户网关，为数据湖查询引擎（例如Spark、Flink或Trino）提供SQL查询服务。 功能特性 多租户: Kyuubi通过统一的身份验证授权层，为资源获取、数据和元数据访问提供端到端的多租户支持。 高可用: Kyuubi基于ZooKeeper提供负载均衡，实现了企业级高可用性和无限的客户端高并发。 多工作负载: Kyuubi可以通过一个平台、一个数据副本和一个SQL接口轻松支持多个不同的工作负载。 使用场景 交互式分析: 利用Kyuubi可以构建企业级分析平台，用于对大数据进行交互式可视化分析，支持常见的计算框架。 Kyuubi支持JDBC和O

Apache Kyuubi是一个高性能的分布式SQL-on-Hadoop服务框架，通过JDBC/ODBC接口提供便捷的大数据存储访问和操作，支持多种处理引擎如Spark SQL、Flink等。其设计以高效、安全和多租户环境支持为特点，适用于各类数据分析需求。Kyuubi还支持多种安全机制和与Hive的兼容性，通过优化的会话管理和资源隔离实现了出色的并发处理。

网易数帆的 Serverless Spark 框架 Kyuubi，最近真是让我眼前一亮。企业级的稳定性，配上Serverless 的灵活性，对前端开发接入大数据，挺友好。你不需要管 Spark 的底层部署，也不用在调优上烧脑，直接调用接口就能跑数据。嗯，效率一下子就上去了。 背后的设计思路也蛮巧妙。Kyuubi 其实相当于把 Spark 封装了一层，你像用数据库一样用 Spark，连 JDBC 都支持，写起来像 SQL 那样简单直观。kyuubi-sql-engine模块做的不错，响应也快，适合批量任务或数据湖操作。 它和一些常用的数据湖技术，比如Hudi、Delta Lake、Iceberg