Conectar o Databricks

A conexão do Databricks faz duas coisas:

• Erro real dos notebooks: quando uma atividade Databricks do Data Factory falha, o Vigia busca no Databricks a classe do erro, a exceção, a mensagem e o notebook, e mostra na execução e no incidente.
• Jobs do Databricks (opcional): cada job vira um pipeline no Vigia, com Status, incidentes, horários-limite e relatórios.

É uma conexão por conta, para o workspace do Databricks.

Como conectar

1. Em Configurações › Conexões › Adicionar conexão, escolha Azure Databricks.
2. No modo Automática, rode o comando no Azure Cloud Shell. Ele adiciona o app Miner Vigia ao workspace e dá Can View nas pastas dos notebooks que o Data Factory executa.
3. Cole a última linha que o comando mostrar e salve.
4. Na página da conexão, clique em Verificar acesso. O resultado mostra cada item: identidade, acesso ao workspace, execuções e Unity Catalog.

Acompanhar os jobs

Na página da conexão, em Jobs do Databricks, clique em Acompanhar os jobs. O Vigia passa a ler os jobs em que o app tem Can View: 31 dias na primeira vez e depois a cada coleta.

Catálogo de dados

No plano Enterprise, em Catálogo de dados, escolha os catálogos do Unity Catalog que entram no Vigia e clique em Salvar seleção. Veja Catálogo e linhagem.

Execuções que o Vigia não vê

Uma execução disparada pelo Data Factory segue a permissão do notebook. Se o erro aparecer só como "falhou", sem a mensagem do Databricks, falta Can View na pasta do notebook. Notebooks em pastas pessoais (/Users/…) ficam privados.