如何将日志分析工作区与笔记本集成，用于监视Databricks笔记本(自定义日志)？

Question

我在Azure databricks工作区中创建了笔记本，并希望使用Log工作区监视我的笔记本，但是我看不到任何关于databricks笔记本的日志度量，因为databricks是一个第三方工具。就像我们为Azure SQL数据库创建日志度量一样，使用日志分析和SQL分析来监视数据库。在跟踪了几个文档和博客之后，我了解到日志分析中没有内置的用于监视databricks笔记本的特性，我必须编写用于监视databricks笔记本的自定义代码(使用Python)。团队，如果有人有同样的想法，你能在这里帮助我吗？我跟踪了这个链接：

https://learn.microsoft.com/en-us/azure/databricks/administration-guide/account-settings/azure-diagnostic-logs

Answer 1

您是否尝试过本文档中提到的步骤：“Azure数据库中的诊断日志记录”？

通过配置诊断设置，可以配置下列数据的集合：

{ dbfs, clusters, accounts, jobs, notebook,ssh, workspace, secrets, sqlPermissions, instancePools}

STEP1:确保您已经配置了诊断设置。

​

​

STEP2:在配置诊断设置之后，您可以转到Logs => Logs => Log Management =>，您将发现Databricks notebook =>运行以下查询，以获取有关笔记本的详细信息。

DatabricksNotebook 

| where TimeGenerated > ago(24h) 

| limit 10

​

​

STEP3:您可以从结果中选择任何一个，并检查有关笔记本的所有细节。

​

​