← Todas as aulas
Engenharia de Dados e Web Scraping
Introdução à engenharia de dados e web scraping na prática. Como coletar, processar e transformar dados brutos.
Tarefa
Prazo: 13 de agosto de 2026
Antes de começar
- Evitem o uso de IA generativa, o foco é o seu aprendizado, não a resposta.
- Tente resolver as questões por conta própria até o limite, antes de pesquisar a solução.
- Junte-se com colegas para fazer as tarefas.
Descrição
1. Clone o repositório da atividade e leia o Guia do Aluno.
2. Construa o pipeline da loja Boa Compra seguindo as camadas landing → bronze → silver → gold.
3. Implemente as funções marcadas com TODO para ingestão, limpeza, padronização, agregação e ETL reverso.
4. Execute os scripts verificar_*.py até que todos exibam TUDO CERTO!.
5. Ao final, execute streamlit run application/app.py para visualizar o relatório. Não utilize pandas: a atividade deve ser feita com Python puro e a biblioteca padrão.