Dados API Clube Duratex

Este documento tem como objetivo descrever detalhes da migração do processo Dados API Clube Duratex, que foi efetuado a partir da DAG Airflow analytics-etl_clube_duratex.

Tarefa Jira de Desenvolvimento: [AEMD-46] Migrar Dag analytics-etl_clube_duratex - Jira (atlassian.net)

Nome da DAG Migrada: analytics-etl_clube_duratex

Arquivo Utilizado para Migração: analytics-etl_clube_duratex.zip

Open

Nome do Notebook Databricks: dados_api_clube_duratex

Link do Notebook Databricks: https://dbc-9570c746-ec11.cloud.databricks.com/?o=3606981051492833#notebook/1095884567928238/command/2498185548964593

Nome do JOB Databricks: JOB_MADEIRA_CLUBE_DURATEX

Link do JOB Databricks: https://dbc-9570c746-ec11.cloud.databricks.com/?o=3606981051492833#job/672957376465567

Agenda de Execução do JOB: Daily at 06:00

Nome do Notebook START JOB:

Link do Notebook START JOB:

Tabela (s) utilizada (s) na Leitura do Processo

Observações Importantes Referentes à (às) Tabela (s) de Leitura

Tabela(s) atualizadas(s) no Processo

• analytics_madeira.t_dados_api_clube_duratex

Detalhes do Processo Migrado

O processo lê os dado da API https://apis.prod.dtxlab.com.br/ e monta um dataframe, e então realiza os casts nos campos do dataframe para gravar os dados na tabela analytics_madeira.t_dados_api_clube_durate no modo overwrite.