Azure数据湖文件中的逻辑视图

Question

我有一个要求分类的PII和非PII数据从Azure数据湖发电1文件。由于我不想复制数据湖中的物理文件创建，我们是否可以在数据湖中创建逻辑视图，最好与物化视图相比较。

更好的技术-天青同步分析/数据库/ VM与火花过程，.

此外，该技术易于与RBAC的Active Directory集成。

告诉我可能性。

Answer 1

您今天可以通过Azure Synapse SQL on实现这一点。以下是如何：

在database

• Create数据库作用域内的credentials

• Create外部数据源中，

1. 使用该credential
2. Create同时查看文件

下面是一些可以帮助您执行以下步骤的文档：https://learn.microsoft.com/en-us/azure/synapse-analytics/sql/create-use-external-tables https://learn.microsoft.com/en-us/azure/synapse-analytics/sql/create-use-views

一旦完成，您应该创建登录，并在数据库中创建与这些登录相关联的用户。这个文档可以帮助：https://learn.microsoft.com/en-us/azure/synapse-analytics/sql/access-control#database-level-permission

现在您应该根据您的描述授予适当的权限，我认为您需要这些权限：

在视图上选择- doc：https://learn.microsoft.com/en-us/sql/t-sql/statements/grant-object-permissions-transact-sql?view=sql-server-ver15

• GRANT引用对凭证- doc：https://learn.microsoft.com/en-us/sql/t-sql/statements/grant-database-scoped-credential-transact-sql?view=sql-server-ver15

• DENY管理数据库大容量操作- doc：https://learn.microsoft.com/en-us/sql/t-sql/statements/deny-database-permissions-transact-sql?view=sql-server-ver15

这将为您提供一个具有视图和用户的数据库，这些视图和用户可以访问他们被允许访问的视图，而且他们将无法在数据库中创建新的对象，也不能使用凭据在湖面上进行随机查询。