Projeto-ETL-01

Projeto de Exploração, Transformação e Carregamento de Dados (ETL)

Site:
Autor: Flávio Varejão
Manutenção: Flávio Varejão

Esse projeto contém o passo a passo de uma Análise Exploratória de uma base de dados dos casos graves de COVID-19 na cidade de Recife.

O projeto foi dividido em 4 etapas, a primeira etapa consiste na extração e na validação dos dados. Na segunda etapa é feita a limpeza dos dados e na terceira etapa a transformação dos dados. E por último na quarta etapa é feita a Análise Exploratória dos Dados. A seguir, uma breve descrição do que foi feito em cada etapa do projeto.

Base de Dados

Casos Graves – Covid-19

A base de dados foi extraída do website: http://dados.recife.pe.gov.br/dataset/casos-graves-covid-19

Ela apresenta as notificações desde março de 2020 dos casos de Síndrome Respiratória Aguda Grave (SRAG) suspeitos para Covid-19 da cidade do Recife.

Etapa 1

Extração e Validação dos Dados

• Carregamento dos dados
• Criação do Dataframe
• Definição de parâmetros do Dataframe
• Identificação dos tipos de dados
• Criação de um Schema
• Validação do Schema

Etapa 2

Limpeza

• Renomear colunas
• Identificação de dados não informados ou inconsistentes
• Alteração dos tipos de dados

Etapa 3

Transformação dos Dados

• Criação de colunas
• Substituição dos dados
• Alteração dos novos tipos de dados
• Validação do novo Dataframe

Etapa 4

Análise Exploratória

• Apresentação de dados estatísticos
• Relacionamento entre colunas
• Agrupamento de dados para análise
• Geração de gráficos para análise