Ciência de Dados & Estatística 100% Solo — Pipeline de Ingestão ETL, Algoritmo de Matching Semântico & Dashboard Web

Egressos Intelligence: Pipeline de Dados & Matching de Empregabilidade

Pipeline de dados e análise de mercado conectando egressos ao mercado de trabalho com integração à Adzuna API.

Django Docker Machine Learning NumPy & Pandas Python SQL / PostgreSQL
API Adzuna em Tempo Real
Integração de Dados
Matching de Competências
Motor de Análise
PostgreSQL Relacional
Persistência

Visão Geral da Solução

### Visão Geral & Engenharia de Dados O projeto **Egressos System** foi desenvolvido para fechar a lacuna de dados sobre o destino profissional de estudantes egressos e o alinhamento pedagógico das instituições com as demandas reais do mercado de trabalho. A solução abrange: 1. **Pipeline de Ingestão Automatizado**: Rotinas periódicas de extração que consultam a API internacional de vagas Adzuna, filtrando por localização geográfica (Manaus/Amazonas/Brasil), faixa salarial e requisitos de tecnologia. 2. **Normalização & Higienização de Dados**: Tratamento de títulos de vagas, remoção de duplicatas, extração de entidades (skills requeridas) e enriquecimento de dados em PostgreSQL. 3. **Algoritmo de Matching de Competências**: Cruzamento entre o perfil formativo do egresso e a demanda das empresas, gerando um índice percentual de aderência curricular. 4. **Painel Analítico de Decisão**: Visualização de métricas de absorção pelo mercado, salários médios por curso e lacunas de conhecimento (skills gaps).

O Desafio

Instituições educacionais não possuem visibilidade sobre a efetividade de seus cursos no mercado de trabalho e falham em orientar egressos para oportunidades alinhadas às suas qualificações.

Arquitetura Técnica

Pipeline em Python com Pandas para normalização, persistência em PostgreSQL, integração com REST APIs externas e interface em Django para visualização analítica.

Diferenciais & Engenharia Aplicada

  • Integração contínua e consumo automatizado da API internacional de empregos Adzuna.
  • Algoritmo de cálculo de aderência curricular baseado em mineração de dados.
  • Detecção de tendências de habilidades mais demandadas por setor na região.
  • Geração automatizada de relatórios estatísticos de impacto formativo.

Ficha do Projeto

Categoria: Ciência de Dados & Estatística
Autoria & Papel: 100% Solo — Pipeline de Ingestão ETL, Algoritmo de Matching Semântico & Dashboard Web
Status: Concluído & Testado em Produção
Conversar sobre este Projeto Ver Currículo Completo

Outros Projetos da Área

Ciência de Dados & Estatística

Lotofácil Master: Motor Quantitativo & Backtesting Vetorizado

Motor quantitativo de simulação probabilística, matrizes de transição de Markov e backtesting histórico vetorizado sobre milhares de concursos.

Ver Detalhes →
Ciência de Dados & Estatística

WhatsApp AI Agent: Agente Autônomo com RAG & Memória Redis

Atendente autônomo com orquestração em n8n, LLMs (OpenAI), memória de contexto em Redis e WhatsApp HTTP API.

Ver Detalhes →
Ciência de Dados & Estatística

QEdu Analytics Engine: Microsserviço em Go para Indicadores Públicos

Microsserviço de alta velocidade em Go para extração massiva, agregação e análise de métricas educacionais públicas.

Ver Detalhes →