Meta de Qualidade

Este documento tem como objetivo descrever o processo META_QUALIDADE, que foi desenvolvido no databricks.

Tarefa Jira de Desenvolvimento: https://dtxlab.atlassian.net/browse/AMDR-515

Nome da arquivo: META_QUALIDADE.csv

Arquivo Utilizado:

Open

Nome do Notebook Databricks: META_QUALIDADE

Link do Notebook Databricks: https://bitbucket.org/duratex/analytics-databricks-madeira/src/master/Workspace/analytics-madeira/Industrial/PROCESSO_SOP_MADEIRA/SOP_MADEIRA.py

Nome do JOB Databricks: JOB_MADEIRA_INDUSTRIAL_META_QUALIDADE

Link do JOB Databricks: https://dbc-1d7378f1-3eb3.cloud.databricks.com/?o=3038895363325901#job/680353844006658/runs

Agenda de Execução do JOB: <Informar o agendamento (scheduling) configurado para o job no workflow databricks>

Nome do Notebook START JOB: <Caso o notebook seja acionado por um START JOB, inclua o nome dele. Caso contrário, desconsidere esse item.>

Link do Notebook START JOB: <Caso o notebook seja acionado por um START JOB, inclua o nome dele. Caso contrário, desconsidere esse item.>

Tabela (s) e Arquivo (s) utilizado (s) na Leitura do Processo

• META_QUALIDADE.csv

• analytics_stg.t_producao_meta_qualidade_temp

JOB_MADEIRA_INDUSTRIAL_META_QUALIDADE

Observações Importantes Referentes à (às) Tabela (s) de Leitura

Tabela(s) atualizadas(s) no Processo

• analytics_madeira_industrial.t_producao_meta_qualidade

Detalhes do Processo

Uma bases de dados no ambiente do Databrick será fonte para utilização no relatório de apontamento de produção.

O arquivo é disponibilizado manualmente pelo time da madeira industrial, geralmente mensal, a rotina roda as 13:00.

O notebook faz a leitura do arquivo ( META_QUALIDADE.csv ) no path '/mnt/dexco-da-data-upload-archive-madeira_industrial/PRODUCAO/INPUT/' realizando algumas transformações diante um dataframe carregando os dados na tabela final ( analytics_madeira_industrial.t_producao_meta_qualidade).

Para finalizar o processo faz o Archive do arquivo.