Desenvolver o pipeline Delta Live Tables

Os artigos desta seção descrevem os passos e as recomendações para o desenvolvimento e teste do Delta Live Tables pipeline em um Databricks Notebook, no editor de arquivos Databricks ou localmente usando um ambiente de desenvolvimento integrado (IDE).

O senhor pode usar Python ou SQL para escrever o código do pipeline. O senhor pode configurar um pipeline com vários códigos-fonte ativos (Notebook e arquivos) escritos em Python e SQL, mas cada Notebook ou arquivo individual só pode usar um único idioma.

Criar um pipeline na interface do usuário do Databricks

Para ver os passos da interface do usuário para configurar um Delta Live Tables pipeline a partir do código em um Notebook, consulte Configurar um Delta Live Tables pipeline .

Notebook experiência para o desenvolvimento do código Delta Live Tables (Public Preview)

Quando o senhor trabalha em um Python ou SQL Notebook que é o código-fonte de um Delta Live Tables pipeline existente, é possível conectar o Notebook ao pipeline e acessar um conjunto de recursos no Notebook que auxiliam no desenvolvimento e na depuração do código Delta Live Tables. Veja a experiência do Notebook para o desenvolvimento de código do Delta Live Tables.

Dicas, recomendações e recursos para desenvolver e testar o pipeline

Para obter dicas, recomendações e recursos de desenvolvimento e teste do site pipeline, consulte Dicas, recomendações e recursos para desenvolver e testar o pipeline Delta Live Tables .

CI/CD para o oleoduto

Databricks Os ativos Bundles permitem que o senhor valide, implante e execute de forma programática Databricks recursos como o pipeline Delta Live Tables. Para conhecer os passos que o senhor pode realizar a partir de sua máquina de desenvolvimento local para usar um pacote que gerencia programaticamente a Delta Live Tables pipeline, consulte Desenvolver o pipeline Delta Live Tables com os pacotes ativos Databricks .

Desenvolver o código do pipeline em seu ambiente de desenvolvimento local

Além de usar o Notebook ou o editor de arquivos em seu Databricks workspace para implementar o código pipeline que usa a interface Delta Live Tables Python , o senhor também pode desenvolver o código em seu ambiente de desenvolvimento local. Por exemplo, o senhor pode usar seu ambiente de desenvolvimento integrado (IDE) favorito, como o Visual Studio Code ou o PyCharm. Depois de escrever seu código pipeline localmente, o senhor pode movê-lo manualmente para seu Databricks workspace ou usar as ferramentas Databricks para operacionalizar seu pipeline, inclusive implantando e executando o pipeline.

Consulte Desenvolver o código do pipeline do Delta Live Tables em seu ambiente de desenvolvimento local.