Redes

Este artigo apresenta as configurações de rede para a implementação e o gerenciamento da conta e do espaço de trabalho do Databricks.

Visão geral da arquitetura do Databricks

O Databricks opera a partir de um plano de controle e de um planocompute .

  • O plano de controle inclui o serviço de backend que o Databricks gerencia em sua account do Databricks. O aplicativo da web está no plano de controle.

  • O planocompute é onde seus dados são processados. Existem dois tipos de planos compute , dependendo da compute que você está usando.

    • Para o clássico Databricks compute, o recurso compute está no seu recurso do Google cloud no que é chamado de plano clássico compute . Isso se refere à rede em seu recurso do Google cloud e seu recurso.

    • Para serverless compute, a serverless compute execução do recurso em um serverless compute plano em sua account do Databricks.

Para obter informações adicionais sobre arquitetura, consulte Visão geral da arquitetura do Databricks.

Conectividade de rede segura

O Databricks fornece um ambiente de rede seguro por default, mas se sua organização tiver necessidades adicionais, você poderá configurar o recurso de conectividade de rede entre as diferentes conexões de rede mostradas no diagrama abaixo.

Diagrama de visão geral da conectividade de rede
  1. Usuários e aplicativos para a Databricks: O senhor pode configurar o recurso para controlar o acesso e fornecer conectividade privada entre os usuários e o espaço de trabalho do Databricks. Consulte Usuários da rede Databricks.

  2. O plano de controle e o plano clássico compute: Os recursos clássicos do compute, como o clusters, são implantados no seu recurso do Google cloud e se conectam ao plano de controle. O senhor pode usar o recurso clássico de conectividade de rede para implantar o recurso clássico do plano de compute em seu próprio cloud privado virtual e para habilitar a conectividade privada do clusters para o plano de controle. Consulte o site clássico compute plane networking.

  3. O plano serverless compute e o armazenamento: O senhor pode configurar firewalls em seu recurso para permitir o acesso do plano da Databricks serverless compute . Consulte Serverless compute plane networking.

O senhor pode configurar o recurso de rede de armazenamento do GCP para proteger a conexão entre o plano compute e Google Cloud Storage. Para obter mais informações, consulte Recomendações de rede para a lakehouse Federation.

A conectividade entre o plano de controle e o serverless compute plano ocorre sempre no clouds backbone da rede e não na Internet pública.