Content Comparison

Tarefa Jira de Desenvolvimento

​

Regras de cada campo:

Clique aqui para visualizar

Script SQL utilizado na migração

duratex / analytics-databricks-deca / Workspace / analytics-deca-hydra / CARTEIRA_RC / ANALYTICS_PRD_TB_CARTEIRA_RC.py — Bitbucket

 Origem

• STAGE.INTELIGENCIA_MERCADO_GOLD.COMMODITIES

• STAGE.INTELIGENCIA_MERCADO_GOLD.COMMODITIES_BR

• STAGE.INTELIGENCIA_MERCADO_GOLD.CONSUMO_DE_ACO

• STAGE.INTELIGENCIA_MERCADO_GOLD.CONSUMO_DE_CIMENTO

• STAGE.INTELIGENCIA_MERCADO_GOLD.DESEMPREGO

• STAGE.INTELIGENCIA_MERCADO_GOLD.FAMILIAS

• STAGE.INTELIGENCIA_MERCADO_GOLD.FINANCIAMENTO_IMOBILIARIO

• STAGE.INTELIGENCIA_MERCADO_GOLD.FIPE

• STAGE.INTELIGENCIA_MERCADO_GOLD.IBCBR

• STAGE.INTELIGENCIA_MERCADO_GOLD.IC_BR_METAL

• STAGE.INTELIGENCIA_MERCADO_GOLD.IGMI_R

• STAGE.INTELIGENCIA_MERCADO_GOLD.INCC

• STAGE.INTELIGENCIA_MERCADO_GOLD.INDICES_FGV

• STAGE.INTELIGENCIA_MERCADO_GOLD.IVAR

• STAGE.INTELIGENCIA_MERCADO_GOLD.PRODUCAO

• STAGE.INTELIGENCIA_MERCADO_GOLD.RENDA

• STAGE.INTELIGENCIA_MERCADO_GOLD.SERVICO

• STAGE.INTELIGENCIA_MERCADO_GOLD.TAXA_JUROS_BR_10_ANOS

• STAGE.INTELIGENCIA_MERCADO_GOLD.VENDAS_VAREJO

• STAGE.INTELIGENCIA_MERCADO_GOLD.MERCADO_IMOBILIARIO

Periodicidade Carga

1 x ao dia

Tabela Destino Final

hive_metastore.analytics_prd.tb_carteira_rc

Database no Hive

analytics_prddexco.indicadores_macro_economicos.indicadores_mercado

Database em DEV

indicadores_macro_economicos

Ação DML

INSERTCREATE, DELETE e UPDATEREPLACE

Descrição Ação DML

Primeiro atualiza os dados existentes na tabela para a flag_delta = 0. Depois insere os dados da nova execução e por último verifica se existem dados na tabela que tenham sido gerados a mais de 1 ano, se sim, grava esses dados no diretório do Glacier e excluí da tabelaCria ou Recria a View baseada na consulta as tabelas de origem.

Nome do Notebook Databricks:

ANALYTICSDEXCO_PRD_TB_CARTEIRA_RCINDICADORES_MERCADO

Link do Notebook Databricks

/gold/analytics-indicadores-decamacro-hydraeconomicos/CARTEIRADEXCO_RC/ANALYTICS_PRD_TB_CARTEIRA_RCINDICADORES_MERCADO

Nome do JOB Databricks:

JOB_DECA_TB_CARTEIRA_RC INDICADORES_MERCADO - Databricks

Link do JOB Databricks

JOB_DECA_TB_CARTEIRA_RC - Databricks

Nome do Job Pai Databricks:

não há

Link do JOB Pai Databricks

não há

Agenda de Execução do JOB

Diariamente as 7h 6h da manhã (horário de Brasília)

tabela_origem

string

coluna_origem

string

mes_referencia

date

nome_indicador

string

sigla_indicador

string

fonte

string

metrica

string

valor

double