Versions Compared

Version Old Version 3 New Version 4
Changes made by

Paulo Gomes Werneck Junior

Paulo Gomes Werneck Junior

Saved on

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

...

Este processo realiza apenas a coleta dos dados e os armazena na camada “bronze” do Data Lake, processamentos que utilizem os dados da empresa Tendências devem utilizar a tabela criada nesse pipeline como bas,e base e incrementar os parâmetros de busca da API, caso necessário.

...

Job

Parâmetros

Periodicidade

Notebook

Repositório

coletor_api_tendencias

Code Block
languagejson
{
  "base_url": "https://api.machina.tendencias.com.br/query",
  "database": "inteligencia_mercado_bronze",
  "table": "tendencias_indicadores_base",
  "tickers": "M2449M86001 M2450M86002 M2452M86003 M83324M86000 M7731 M85107 M85080 M5031M5023 M11709 M11674M11687 M85195 M2454 M44803 M44792 M84184 M3866 M2453 M86001 M86002 M86003"
}

Diariamente
(56 0 7 * * ?)

coletor-api-tendencias-bronze

https://bitbucket.org/duratex/analytics-databricks-inteligencia-mercado.git

...