有没有办法通过带有snowflake扩展的JDBC驱动程序运行解释Snowflake查询?我正在运行net.snowflake snowflake-jdbc 3.12.8,它抛出了一个错误,显示为net.snowflake.client.jdbc.SnowflakeSQLException: SQL compilation error: syntax error line 1 at position 15 unexpected 'EXPLAIN'.。我看到有更多的最新版本到3.12.16,但在发行说明中没有提到这一增加的功能。我正在运行的完全相同的查询在snowflake UI中也可以成功运行。
发布于 2021-01-20 07:24:05
我使用EXPLAIN和Snowflake JDBC driver 3.12.8没有问题:
print(sc._jvm.net.snowflake.spark.snowflake.Utils.getClientInfoString())
x=sc._jvm.net.snowflake.spark.snowflake.Utils.runQuery(sfOptions, 'explain select * from numbers limit 10')
cols = x.getMetaData().getColumnNames()
print(cols)
while(x.next()):
print([x.getString(i) for i in range(1, 1+cols.size())])结果显示我使用的是指定的JDBC版本(通过PySpark)和EXPLAIN查询的结果:
{
"spark.version" : "2.4.4",
"spark.snowflakedb.version" : "2.8.1",
"spark.app.name" : "Simple App",
"scala.version" : "2.11.12",
"java.version" : "1.8.0_242",
"snowflakedb.jdbc.version" : "3.12.8"
}
['step', 'id', 'parent', 'operation', 'objects', 'alias', 'expressions', 'partitionsTotal', 'partitionsAssigned', 'bytesAssigned']
[None, None, None, 'GlobalStats', None, None, None, '1', '1', '512']
['1', '0', None, 'Result', None, None, 'NUMBERS.X', None, None, None]
['1', '1', '0', 'Limit', None, None, 'rowCount: 10', None, None, None]
['1', '2', '1', 'TableScan', 'TEMP.PUBLIC.NUMBERS', None, 'X', '1', '1', '512']为了进一步的社区调试,你需要粘贴你的代码来检查发生了什么。
https://stackoverflow.com/questions/65799176
复制相似问题