...
Tarefa Jira de Desenvolvimento |
| |||||||||
Regras de cada campo: | ||||||||||
Script SQL utilizado na migração |
https://github.com/dexco-brasil/analytics-databricks-deca -indicadores-macro-economicos/blob/master/Workspace/ analyticsetl-decaindicadores-hydra / CARTEIRA_RC / ANALYTICS_PRD_TB_CARTEIRA_RC.py — Bitbucket | Origem | ||||||||
Origem |
| |||||||||
Periodicidade Carga | 1 x ao dia. | |||||||||
Tabela Destino Final |
| Database no Hive | analytics_prd | |||||||
Database em DEV |
| |||||||||
Ação DML | INSERTCREATE, DELETE e UPDATEREPLACE | |||||||||
Descrição Ação DML | Primeiro atualiza os dados existentes na tabela para a flag_delta = 0. Depois insere os dados da nova execução e por último verifica se existem dados na tabela que tenham sido gerados a mais de 1 ano, se sim, grava esses dados no diretório do Glacier e excluí da tabelaCria ou Recria a View baseada na consulta as tabelas de origem. | |||||||||
Nome do Notebook Databricks: | ANALYTICSDEXCO_PRD_TB_CARTEIRA_RCINDICADORES_MERCADO | |||||||||
Link do Notebook Databricks | https:/gold/analyticsdbc-deca-hydra/CARTEIRA_RC/ANALYTICS_PRD_TB_CARTEIRA_RC9570c746-ec11.cloud.databricks.com/?o=3606981051492833#notebook/245686217348750/command/245686217348751 | |||||||||
Nome do JOB Databricks: | JOB_DECA_TB_CARTEIRA_RC INDICADORES_MERCADO - Databricks | |||||||||
Link do JOB DatabricksJOB_DECA_TB_CARTEIRA_RC - Databricks | https://dbc-1d7378f1-3eb3.cloud.databricks.com/?o=3038895363325901#job/415313764317678 | |||||||||
Nome do Job Pai Databricks: | não há | |||||||||
Link do JOB Pai Databricks | não há | |||||||||
Agenda de Execução do JOB | Diariamente as 7h 6h da manhã (horário de Brasília) |
...
| Anchor | ||||
|---|---|---|---|---|
|
...
col_name | data_type | comment |
|---|---|---|
tabela_origem | string | Tabela de Origem |
coluna_origem | string | Coluna de Origem |
mes_referencia | date | Mês de Referência |
nome_indicador | string | Nome do Indicador |
sigla_indicador | string | Sigla do Indicador |
fonte | string | Fonte do Indicador (Orgão/SITE) |
metrica | string | Métrica do Valor |
valor | double | Valor |
Histórico de Modificações: | |||||||||||||
Versão | Nome | Função e Área | Data | Modificação | |||||||||
V1 | Raquel Jung Mateus | PO - Analytics | 0103/1210/20222023 | Criação do primeiro ScriptEscopo | |||||||||
V2 | Henrique da Gama Fernandes | Engenheiro Renato Tavares | Coord de dados - Analytics | 2516/0410/2023 | Reconstrução do código e ajustes.Criação do primeiro Script | ||||||||
V3 | Anderson Manoel Teixeira | Analista de dados - Analytics | 0418/0810/2023 | Foi adicionado o ducumento de venda 'ZMPL' no filtro da query.
Jira Legacy | | ||||||||
| server | System Jira | ||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| serverId | 3c628e15-bebb-3e5d-b7fa-7d519db57e40 | key | ADECA-630|||||||||||
V4 | Priscilla Oliveira | Squad Leader | Validação da Documentação | ||||||||||