AI/ML Developer · GenAI Engineer · Agentic Systems
LLMs · AI Agents · RAG · Evals · Observability · GenAIOps
Construo aplicações de LLM e agentes de IA que possam ser avaliadas, observadas e operadas com segurança em produção.
Meu foco está na camada de engenharia entre um protótipo com LLM e um sistema confiável: recuperação, estado, ferramentas, outputs estruturados, guardrails, observabilidade, avaliação e resiliência.
Sistema de IA que não pode ser medido não deve ser tratado como confiável em produção.
Forgehand — engenharia de agentes
Plataforma multiagente para entrega de software com fan-out paralelo, execução durável, gates humanos e judge LLM subordinado a verificações objetivas como pytest, ruff e mypy.
- Operação: circuit breakers de custo, tempo e tentativas; tracing com OpenTelemetry/Langfuse
- Confiabilidade: checkpoints em PostgreSQL e retomada após interrupções
- Evidência: piloto reproduzível com metodologia e limitações
Enterprise RAG System — retrieval mensurável
Pipeline de RAG com busca híbrida, reranking e métricas por estágio para separar falhas de retrieval de falhas de geração.
- Retrieval: embeddings + BM25 + reranking
- Avaliação: Recall@K, MRR, nDCG e groundedness
- API: documentação interativa
mcp-dados-br — ferramentas para agentes
Servidor MCP para consultar dados públicos brasileiros a partir de agentes e assistentes de IA.
- Fontes: IBGE, Banco Central, INMET, Câmara dos Deputados e Senado Federal
- Engenharia: cache, retry, transporte stdio/HTTP, testes offline e Docker
- Distribuição:
uvx mcp-dados-br
Retrieval → medir Recall@K, MRR e nDCG
Agent state → controlar estado e checkpoints
LLM output → validar outputs estruturados
Tools → timeout, retry e idempotência
Observability → traces, custo, latência e falhas
Evaluation → groundedness + LLM-as-a-Judge
Deployment → API, containers, CI/CD e cloud
Language Python · SQL
Backend FastAPI · Pydantic
Agents LangGraph · LangChain · LlamaIndex
Retrieval Qdrant · BM25 · ColBERT · SentenceTransformers
State/Data Redis · PostgreSQL · SQLAlchemy
Cloud Azure · AWS · Azure AI Foundry · Amazon Bedrock
Infra Docker · Kubernetes · Terraform · CI/CD
Observability Langfuse · OpenTelemetry · Prometheus · Grafana
engineering = {
"retrieval": "measure it",
"state": "control it",
"output": "validate it",
"production": "observe it",
"failure": "design for it",
}