Apache方解石数据联盟Usecase

Question

只想检查Apache方解石是否可以用于用例“数据联邦”(多个数据库的查询)。

我的想法是，我有一个主查询(5个表)，它包含一个数据库的表(比如Hive)，还有3个来自另一个数据库的表(比如MySQL)。

• 我可以从一个JDBC客户端接口对多个数据库执行主查询吗？
• 如果有可能，查询执行(特别是数据库间连接)在哪里执行？
• 另外，我能否从方解石中得到一个物理计划，在那里我可以在另一个执行引擎中显式执行？

我从方解石文档中读到，它可以压低Join和GroupBy，但我无法理解？有人能帮我理解这个吗？

Answer 1

我会试着回答。你也可以把问题发送到邮件列表中。dev@calcite.apache.org，你更有可能在那里得到答案。

我可以从一个JDBC客户端接口对多个数据库执行主查询吗？如果有可能，查询执行(特别是数据库间连接)在哪里执行？

可以，停那儿吧。数据库间的连接发生在你的记忆中方解石运行的地方。

我可以从方解石得到一个物理计划，在那里我可以在另一个执行引擎中显式执行吗？

可以，停那儿吧。很多方解石消费者都是这样做的。但是你必须围绕方解石规则系统，我是说excute

我从方解石文档中读到，它可以向下推Join和GroupBy，但我无法理解它？有人能帮我理解这个吗？

这些是引擎所做的SQL优化。想象一下，一个groupBy可能发生在一个小表上，但实际上是在加入一个大表之后指定的。