Visão geral da arquitetura do Databricks

Este artigo fornece uma visão geral de alto nível da arquitetura Databricks, incluindo sua arquitetura corporativa, em combinação com clouds do Google.

Arquitetura de alto nível

Databricks opera a partir de um plano de controle e de um planocompute .

  • O plano de controle inclui o serviço de backend que Databricks gerenciar em seu Databricks account. O aplicativo da Web está no plano de controle.

  • O planocompute é onde seus dados são processados. Há dois tipos de planos compute, dependendo do compute que o senhor estiver usando.

    • Para serverless compute, o serverless compute recurso execução em um serverless compute plano em seu Databricks account.

    • Para o clássico Databricks compute, o recurso compute está no seu recurso do Google cloud no que é chamado de plano clássico compute . Isso se refere à rede em seu recurso do Google cloud e seu recurso.

O diagrama a seguir descreve a arquitetura geral do Databricks.

Diagrama: Arquitetura da Databricks

Plano de computação sem servidor

No plano serverless compute , Databricks compute recurso execução em uma camada compute dentro do seu Databricks account. Databricks cria um plano serverless compute na mesma região do Google cloud que o plano workspaceclássico compute do senhor.

Para proteger os dados do cliente dentro do plano serverless compute , serverless compute execução dentro de um limite de rede para o workspace, com várias camadas de segurança para isolar diferentes espaços de trabalho do cliente Databricks e controles de rede adicionais entre clusters o mesmo cliente.

Plano de computação clássico

No plano clássico compute, Databricks compute recurso execução em seu Google cloud account. Novos recursos do compute são criados em cada rede virtual do workspaceno Google cloud account do cliente.

Um avião clássico compute tem isolamento natural porque é executado no próprio Google cloud account de cada cliente. Para saber mais sobre a rede no plano clássico compute, consulte Rede no plano clássico compute .

Para obter suporte regional, consulte Nuvens e regiões do Databricks.