Skip to content

Commit

Permalink
update README
Browse files Browse the repository at this point in the history
  • Loading branch information
matbragan committed May 23, 2024
1 parent c9a7c3f commit bb62a2d
Show file tree
Hide file tree
Showing 2 changed files with 3 additions and 3 deletions.
4 changes: 2 additions & 2 deletions README.md
Original file line number Diff line number Diff line change
Expand Up @@ -28,15 +28,15 @@ Dados disponibilizados em: https://dados.gov.br/dados/organizacoes/visualizar/ag

### Banco

O SGBD escolhido para o projeto foi o PostgreSQL, por se tratar de um banco com alta performance de query e simplicidade em seu manuseio.
O SGBD escolhido para o projeto foi o PostgreSQL, por se tratar de um banco com alta performance e simplicidade em seu manuseio.
Por meio de scripts em Python é feito o download das bases de dados em sua origem e transformados em tabelas para o PostgreSQL - utilizando SQLAlchemy.
Tais scripts podem ser encontrados dentro do repositório [aqui](https://github.com/matbragan/ancine-database/tree/main/airflow/plugins).
> ⚠️ **IMPORTANTE**
> Se atente em popular um arquivo chamado `.env` utilizando o `.env_template` como auxiliar. Esse arquivo será importante para a criação das tabelas origens no PostreSQL e para a transformação dos dados utilizando o dbt.
### Transformação

Após os dados em seu formato original (conjuntos de dados da Ancine) serem carregados para o PostgreSQL é feito transformações neles afim de termos melhores dados tratados e trabalhados para fins análiticos.
Após os dados em seu formato original (conjuntos de dados da Ancine) serem carregados para o PostgreSQL, através de tabelas, é feito transformações nelas afim de termos melhores dados tratados e trabalhados para fins análiticos.
Para tais transformações foi escolhido o framework open-source dbt, por possibilitar que engenheiros de dados criem modelos de forma intuitiva e declarativa, facilitando a definição de estruturas de dados complexas e transformações específicas com uma sintaxe familiar.
As configurações e seus modelos (tabelas) do dbt podem ser encontrados dentro do repositório [aqui](https://github.com/matbragan/ancine-database/tree/main/dbt/ancine).

Expand Down
2 changes: 1 addition & 1 deletion terraform/rds/README.md
Original file line number Diff line number Diff line change
@@ -1,6 +1,6 @@
# Criação do Banco de Dados no RDS

Hospedador do banco de dados.
Hospedeiro do banco de dados.

### Requerimentos
- [Terraform instalado](https://developer.hashicorp.com/terraform/tutorials/aws-get-started/install-cli)
Expand Down

0 comments on commit bb62a2d

Please sign in to comment.