将数据从Azure Synapse无服务器SQL池批量加载到Azure存储或Databricks Spark的最佳方法

Question

我正在尝试将数据从Azure Synapse无服务器SQL池批量加载到Azure存储或直接加载到Databricks Spark (使用JDBC驱动程序)。假设我们只知道外部表名而不知道文件在下面的位置，那么执行批量加载的最佳方法是什么？是否有元数据查询来知道文件的位置？

Answer 1

这些文件已经在Azure存储中，因为Synapse Serverless SQL没有“数据库内”存储。

假设它是一个外部表(不是带有OPENROWSET的视图)，那么sys.external_tables有一个location列，其中包含文件或文件夹的路径。

如果你还不知道它在哪个存储帐户和容器中，你可能需要加入sys.external_data_sources来获取这些信息。