Fase 4 — Maestría: construyendo, escalando, gobernando
Duración: 5 semanas · Dedicación: 8–10h/semana · Caminos: esencial para 🔵🟣 · camino 🟢 puede enfocarse en M21, M22, M24 Prerrequisito: Fase 3 completada (ya construyes servidores MCP, subagentes, hooks, Skills y plugins). Foco principal: Claude Code · Conceptos transferibles: marcados con 🌐.
Objetivo de la fase
Salir de "uso y extiendo Claude Code" hacia "construyo agentes propios, mido impacto, lidero adopción y gobierno riesgos". Esta es la fase donde el conocimiento técnico de las fases anteriores se traduce en decisiones de producto, equipo y empresa.
Al final de esta fase puedes:
- Construir agentes customizados desde cero con Claude Agent SDK (no Claude Code, sino la biblioteca base a partir de la cual está construido)
- Orquestar multi-agente con patrones evaluados en producción
- Evaluar la salida de agentes con evals programáticos integrados en CI
- Reducir el costo de uso en 40–70% con técnicas comprobadas
- Medir la productividad real con métricas más allá de "vibes"
- Navegar con claridad los riesgos legales y de IP de código generado por IA
- Definir políticas de gobernanza enterprise para el uso de Claude Code
- Liderar la adopción en equipo sin convertirte en un evangelista aburrido
- Saber cuándo NO usar Claude Code y qué alternativa funciona mejor
Convenciones
- Tipo: 📚 Doc oficial · 📖 Artículo/Paper · 🎓 Curso · 🎬 Video/Podcast · 🛠️ Hands-on/Repositorio
- Idioma:
[PT]portugués ·[EN]inglés - Costo:
[Gratis]·[Pago]·[Freemium] - ⭐ esencial · 🌐 concepto universal (transferible a cualquier agente)
M19 · Claude Agent SDK
Por qué este módulo
Atención a la terminología: el Claude Code SDK fue renombrado a Claude Agent SDK en 2025. La motivación: el SDK no es solo sobre código — es la misma base que Anthropic usa internamente para construir Claude Code, y puedes usarlo para construir cualquier agente (atención al cliente, finanzas, devops, legal, etc.).
Diferencia clave respecto a Claude Code:
- Claude Code es un producto listo (CLI + extensiones + plugins IDE)
- Claude Agent SDK es la biblioteca que te permite construir tu propio Claude Code para tu dominio
Cuándo construir con el SDK en lugar de extender Claude Code vía plugins:
- Necesitas UI customizada (web, mobile, voz)
- Necesitas flujos no-coding (atención, análisis, briefing)
- Necesitas empaquetarlo como producto para clientes
- Necesitas control total sobre el loop de ejecución
Tópicos
- Diferencia entre Claude Code (producto), Claude Agent SDK (biblioteca para agentes), y Anthropic Messages API (un nivel más bajo todavía)
- Instalación del SDK en Python (
anthropic-claude-agent-sdk) y TypeScript (@anthropic-ai/claude-agent-sdk) - Estructura de un agente con SDK: system prompt, tools, loop, gestión de contexto
- Tools nativas (file ops, bash, web search) ya disponibles
- Streaming, tool calling estructurado, gestión de sesiones
- Integración con MCP (servidor MCP también funciona en SDK)
- Deploy: serverless, container, edge
Materiales
Documentación oficial ⭐
-
⭐ 📚 Claude Agent SDK — overview (Claude Code Docs) ·
[EN][Gratis] -
⭐ 📚 Claude Agent SDK — overview (API Docs) ·
[EN][Gratis] -
⭐ 📚 Claude Agent SDK — Quickstart ·
[EN][Gratis]intermedioConstruye un agente que encuentra y corrige bugs en minutos. -
📦 @anthropic-ai/claude-agent-sdk (npm) ·
[EN][Gratis] -
🛠️ anthropics/claude-agent-sdk-demos (GitHub) ·
[EN][Gratis]Demos oficiales. Estudia las implementaciones.
Conceptual ⭐
- ⭐ 📖 Building agents with the Claude Agent SDK — Anthropic Engineering ·
[EN][Gratis]intermedioPost oficial. Por qué fue construido el SDK, patrones y buenas prácticas. Lectura obligatoria.
Tutoriales prácticos ⭐
-
⭐ 📖 The Complete Guide to Building Agents with the Claude Agent SDK — Nader Dabit ·
[EN][Gratis]intermedioGuía completa de referencia. -
📖 Build a Custom Claude Agent With the Anthropic Agent SDK — systemprompt.io ·
[EN][Gratis]intermedio -
🎬 Claude Agent SDK [Full Workshop] — Thariq Shihipar, Anthropic (YouTube) ·
[EN][Gratis]intermedioWorkshop oficial de un ingeniero de Anthropic.
Para escala
- 📖 Claude Managed Agents Guide 2026: Build & Deploy AI Agents at Scale — AI Workflows ·
[EN][Gratis]intermedio
Ejercicio práctico
Construye un agente customizado para un problema real tuyo que no es puramente coding. Sugerencias:
- Agente de triage de tickets de soporte que clasifica, prioriza y responde primero
- Agente de análisis financiero que lee facturas y genera reportes
- Agente de investigación de mercado que busca, sumariza y cita
- Agente de QA que ejecuta casos de prueba manuales vía Playwright (MCP)
Requisitos:
- Usa Claude Agent SDK (Python o TypeScript)
- Al menos 2 tools customizadas
- Al menos 1 servidor MCP integrado
- Deploy mínimo (CLI o web simple)
- README con arquitectura y ejemplos
- Documenta en
learnings-agent-sdk.md
Definition of Done
- Construiste al menos 1 agente propio con Claude Agent SDK
- Sabes la diferencia entre SDK y Claude Code (y cuándo usar cada uno)
- Sabes la diferencia entre Agent SDK y Messages API (una capa abajo)
- Tienes tu agente corriendo en algún ambiente real
M20 · Orquestación multi-agente con Claude Code
Por qué este módulo
🌐 Multi-agente es universal. Los 5 patrones del paper Building Effective Agents (prompt chaining, routing, parallelization, orchestrator-workers, evaluator-optimizer) funcionan en cualquier framework. En Claude Code los implementas vía subagentes + Agent Teams (recurso de Feb/2026); en el SDK los implementas programáticamente.
La regla de oro: multi-agente es sobreingeniería en el 80% de los casos. Saber cuándo NO usarlo es tan importante como saber implementarlo.
Tópicos
Patrones universales 🌐
- Prompt chaining — secuencia simple (output de A se vuelve input de B)
- Routing — agente "clasificador" decide qué especialista atiende
- Parallelization — N agentes en paralelo, agregación al final
- Orchestrator-workers — agente coordinador delega y consolida
- Evaluator-optimizer — generador + evaluador iteran hasta alcanzar criterio
Implementación en Claude Code
- Subagentes en paralelo (M14)
- Agent Teams (Feb/2026) para orquestación nativa
- Hook
SubagentStoppara recoger resultados
Implementación en Agent SDK
- Loops con múltiples instancias
- Tool result aggregation
- Manejo de errores y reintentos
Anti-patrones
- "Equipo de 7 agentes para escribir un email" (sobreingeniería)
- Agentes que duplican contexto
- Cadenas muy largas sin checkpoint
- Falta de presupuesto de tokens (costo explota)
Materiales
Conceptual ⭐
-
⭐ 🌐 📖 Building Effective AI Agents — Anthropic ·
[EN][Gratis]intermedioRe-lectura final. En la fase 4 lo lees con ojo de implementador, no de estudiante. -
⭐ 🌐 🛠️ Anthropic Cookbook — Agent Patterns ·
[EN][Gratis]Implementaciones Python de los 5 patrones. Usa como template. -
⭐ 📖 Building agents with the Claude Agent SDK — Anthropic ·
[EN][Gratis]
Patrones en Claude Code
-
📖 Claude Code Advanced Patterns: Subagents, MCP, and Scaling — Anthropic (PDF) ·
[EN][Gratis]intermedio a avanzado -
📖 Claude Code subagents and the orchestrator pattern — Channel Tel ·
[EN][Gratis]intermedio
Frameworks alternativos (referencia) 🌐
- 🛠️ LangGraph ·
[EN][Gratis]intermedio - 🛠️ AutoGen (Microsoft) ·
[EN][Gratis] - 🛠️ CrewAI ·
[EN][Gratis]Estos no son Claude Code. Son referencia de otros patrones de multi-agente para comparar enfoques.
Ejercicio práctico
Implementa 2 patrones diferentes sobre la misma tarea real:
Tarea: "dado un repositorio, generar reporte de calidad (seguridad, tipado, cobertura, dependencias desactualizadas)"
Patrón A — Orchestrator-workers: 1 agente principal delega a N subagentes especializados (security-checker, type-coverage-checker, deps-checker, etc.). Cada uno devuelve resumen, el principal consolida en reporte.
Patrón B — Evaluator-optimizer: 1 agente genera el reporte, 1 agente evalúa calidad (cobertura, claridad, accionabilidad), e itera hasta que el score alcanza el threshold.
Compara:
- Tiempo total
- Costo total
- Calidad de la salida
- Reproducibilidad
Documenta en learnings-multi-agente.md.
Definition of Done
- Implementaste al menos 2 patrones de multi-agente en tarea real
- Sabes explicar cuándo se aplica cada patrón
- Identificas sobreingeniería en arquitecturas multi-agente ajenas
- Tienes opinión sobre Claude Code subagentes vs LangGraph vs AutoGen vs CrewAI
M21 · Evals — evaluación de salida de agentes
Por qué este módulo
🌐 Evals son el "test unitario" de la era de IA. Sin eval, estás adivinando si el agente regresó. Con eval, tienes un regression test automatizable en CI.
En 2026 el ecosistema es maduro:
- OpenAI adquirió Promptfoo por $86M (Promptfoo sigue siendo MIT, ahora con más inversión)
- Braintrust levantó $80M en Feb/2026 a $800M valuation
- Inspect AI (UK AI Security Institute) se convirtió en referencia open source para evals de safety
Tópicos
Tipos de eval
- Programático — assertions exactas (output ≡ esperado)
- Heurístico — regex, contains, format check
- LLM-as-judge — otro LLM evalúa output cualitativo
- Human-in-the-loop — humano evalúa muestra
- Golden dataset — conjunto fijo de input → output esperado
Cuándo usar cada uno
- Programático: para tools determinísticas
- Heurístico: formato, presencia de secciones
- LLM-as-judge: claridad, helpfulness, tono
- Human: muestra para calibrar LLM-as-judge
- Golden dataset: regression en CI
Herramientas
- Promptfoo — open source, YAML configs, foco en red teaming
- Inspect AI — UK AISI, foco en capability y safety, MIT
- Braintrust — comercial, all-in-one (datasets + experiments + CI)
- Langfuse — open source observability + evals
- Anthropic Console Evals — integrado, simple, oficial
Eval en CI
- Trigger: PR abierto, push a main, schedule
- Falla = bloqueo de merge / alerta
- Comparación con baseline (no regresar)
Materiales
Documentación oficial ⭐
-
⭐ 📚 Anthropic — Evaluation tooling ·
[EN][Gratis] -
⭐ 🛠️ Anthropic Cookbook — Evaluations (busca "evals") ·
[EN][Gratis]
Cursos guiados ⭐
-
⭐ 🎓 Building and Evaluating Advanced RAG Applications — DeepLearning.AI ·
[EN][Gratis]intermedioTiene sección sobre evals que se aplica a agentes en general. -
🎓 Evaluating LLMs and AI Apps — DeepLearning.AI (busca "evaluating") ·
[EN][Gratis]
Herramientas (hands-on) ⭐
-
⭐ 🛠️ promptfoo/promptfoo (GitHub) ·
[EN][Gratis]Open source, MIT, ahora de OpenAI pero sigue abierto. Usa en el ejercicio. -
⭐ 🛠️ UK AISI — Inspect AI ·
[EN][Gratis]Framework del UK AI Security Institute. Foco en capability y safety. -
🛠️ Braintrust ·
[EN][Pago](free tier) All-in-one comercial. Considera si tienes equipo grande. -
🛠️ Langfuse ·
[EN][Freemium]Open source observability, hosted o self-host.
Comparativos y guías ⭐
-
⭐ 📖 The Complete Guide to LLM & AI Agent Evaluation in 2026 — Adaline ·
[EN][Gratis]intermedio -
📖 DeepEval alternatives (2026): Best tools for LLM evals — Braintrust ·
[EN][Gratis] -
📖 Best Promptfoo alternatives in 2026 — Braintrust ·
[EN][Gratis] -
📖 8 Best LLM Evaluation Tools, Ranked [2026] — TECHSY ·
[EN][Gratis] -
📖 Top 5 AI Agent Eval Tools After Promptfoo's Exit — DEV.to ·
[EN][Gratis]
Ejercicio práctico
- Configura Promptfoo (open source, liviano) con YAML config
- Crea un golden dataset de al menos 20 input/output esperados para un workflow tuyo (ej: code review, refactoring, bug fix)
- Eval programático: el output debe contener X, no contener Y, formato Z
- LLM-as-judge: rubric de 1–5 para claridad, corrección, helpfulness
- Integra en CI (GitHub Actions): correr en cada PR; fallar si score promedio cae vs. baseline
- Cuando hagas cambio en prompt/agente, eval valida que no regresó
- Documenta en
learnings-evals.md
Definition of Done
- Tienes suite de evals corriendo en CI para al menos 1 workflow tuyo
- Tienes golden dataset versionado
- Sabes leer resultado de LLM-as-judge críticamente (calibrar con human eval)
- Cambios de prompt nunca van a producción sin eval verde
M22 · Costos, tokens y optimización en Claude Code
Por qué este módulo
La diferencia entre $24/mes y $80/mes o $200/mes y $2000/mes es puramente operacional. Devs que no entienden el costo dejan de adoptar (les parece muy caro) o queman presupuesto innecesariamente. En 2026 Anthropic publicó guías oficiales y la comunidad documenta reducciones de 40–70% con técnicas comprobadas.
Tópicos
Anatomía del costo
- Input tokens vs. output tokens (output 5x más caro)
- Cache reads (10% del precio normal)
- Cache writes (1.25x del precio normal — se paga en 2 lecturas)
- Modelos: Haiku (más barato) → Sonnet (medio) → Opus (premium)
- Thinking budget (extended thinking) — tokens extras
Estrategias de reducción
- Prompt caching —
CLAUDE.mdse cachea automáticamente; ganancia típica 40–50% en input - Auto-compaction — Claude Code resume contexto antes de desbordar la ventana
- Elegir el modelo correcto por tarea:
- Haiku: lookups, formateo, boilerplate, grep, lint fixes
- Sonnet: 80% del trabajo diario (5x más barato que Opus)
- Opus: refac multi-archivo crítico, debugging sutil, decisiones arquitectónicas
- Reducir contexto — no tirar todo el repo, dejar que Claude busque
- Batch API cuando aplica (50% descuento, 24h SLA)
Monitoreo
- Anthropic Console: dashboards de uso, breakdown por modelo
- Claude Code: comando
/costpara ver gasto de la sesión - Alertas y budget caps en equipos
Caso real (documentado)
Reducción del 70% en un equipo APAC: $80/mes → $24/mes cambiando mayoría de Opus a Haiku + Sonnet + caching agresivo (Branch8 + DEV.to)
Materiales
Documentación oficial ⭐
-
⭐ 📚 Claude Code — Manage costs effectively ·
[EN][Gratis]Documentación oficial. -
⭐ 📚 Anthropic API — Pricing ·
[EN][Gratis] -
📚 Anthropic — Prompt caching ·
[EN][Gratis]intermedio
Guías prácticas ⭐
-
⭐ 📖 Reduce Claude Code Costs 60% With These Four Habits — systemprompt.io ·
[EN][Gratis]intermedio -
⭐ 📖 Claude API Cost Optimization: Haiku vs Sonnet and Prompt Caching Cut My Bill 70% — DEV.to ·
[EN][Gratis]intermedio -
📖 How We Cut Claude Code Costs 70%: Token Budget — Branch8 ·
[EN][Gratis] -
📖 7 Practical Techniques to Optimize Claude Code Token Usage — ClaudeCodeLab ·
[EN][Gratis] -
📖 Claude API Cost Optimization: Caching, Batching, and 60% Token Reduction — DEV.to ·
[EN][Gratis] -
📖 Anthropic API Pricing in 2026 (guía completa) — Finout ·
[EN][Gratis] -
📖 Claude API Pricing 2026: Opus vs Sonnet vs Haiku — Nicola Lazzari ·
[EN][Gratis]
Ejercicio práctico
- Audita tu uso actual en el Console Anthropic (últimas 4 semanas):
- Breakdown por modelo
- Cache hit rate
- Costo promedio por sesión
- Aplica 4 cambios:
- Mover tareas simples (lint, format, boilerplate, lookups) a Haiku
- Mantener
CLAUDE.mdconciso (cache eficaz) - Para sesiones largas, usar
/compacten lugar de continuar hasta desbordar - Reservar Opus para tareas multi-archivo críticas
- Compara el costo de las 4 semanas siguientes
- Configura alerta de budget en el Console Anthropic
- Documenta en
learnings-costos.mdcon gráfico de antes/después
Definition of Done
- Redujiste el costo de uso en al menos 30% vs. baseline
- Sabes elegir modelo por tarea en segundos
- Tienes alerta de budget configurada
- Sabes leer el dashboard del Console Anthropic y diagnosticar gastos altos
M23 · Métricas de productividad y ROI
Por qué este módulo
🌐 "Siento que soy más productivo con Claude Code" no pasa en una reunión con C-level. Aquí aprendes a medir impacto real con métricas que caben en un business case.
En 2026 la industria reporta hasta 79% de aceleración de delivery en equipos que adoptaron Claude Code de forma estructurada — pero también hay estudios que muestran que las ganancias se distribuyen heterogéneamente (algunos devs ganan 5x, otros pierden 10%).
Tópicos
Qué medir 🌐
- Lead time (PR abierto → merged)
- Cycle time (commit → producción)
- Throughput (PRs/dev/sprint)
- Defect rate (bugs por release, bugs en producción)
- Test coverage (antes/después)
- Code churn (% de líneas alteradas en 4 semanas después del merge — proxy de calidad)
- Time-to-onboard (días para que un nuevo dev abra su primer PR útil)
Cómo medir
- DORA metrics (estándar de la industria)
- Herramientas: GitHub Actions data, Linear, LinearB, Faros, GitClear
- Survey trimestral de developer experience (DevEx, SPACE)
Frameworks de evaluación
- DORA (Deployment frequency, Lead time, MTTR, Change failure rate)
- SPACE (Satisfaction, Performance, Activity, Collaboration, Efficiency)
- DevEx (Friction, Flow, Cognitive load)
Cuidados estadísticos
- Heterogeneidad de ganancias (mediana ≠ media)
- Confounders (adoptaste Claude Y cambiaste otra cosa)
- Selection bias (devs que adoptan tienden a ser entusiastas)
- Hawthorne effect (la medición cambia el comportamiento)
Materiales
Frameworks oficiales 🌐 ⭐
-
⭐ 🌐 📖 DORA — State of DevOps Report ·
[EN][Gratis]Referencia canónica de métricas de ingeniería. -
📖 SPACE Framework (ACM Queue) ·
[EN][Gratis]
Estudios de productividad con IA ⭐
-
⭐ 📖 Anthropic — Claude Code productivity reports (busca "productivity") ·
[EN][Gratis] -
📖 GitHub — The economic impact of Copilot ·
[EN][Gratis] -
📖 METR — Measuring the Impact of Early-2025 AI ·
[EN][Gratis]Estudios rigurosos de impacto de IA en devs.
Adopción enterprise
-
📖 Enterprise AI Adoption: ROI, Security & Implementation in 2026 — Claude5 ·
[EN][Gratis] -
📖 Claude Code on Team and Enterprise plans — Anthropic ·
[EN][Gratis]
Herramientas
- 🛠️ LinearB ·
[EN][Pago]— métricas DORA + SPACE - 🛠️ Faros AI ·
[EN][Pago]— engineering analytics con foco en IA - 🛠️ GitClear ·
[EN][Freemium]— code quality metrics
Ejercicio práctico
- Establece baseline de tus métricas (4 semanas pre-adopción, si existen datos):
- Lead time, throughput, defect rate
- Define 3 hipótesis comprobables (ej: "Claude Code reduce lead time en 30%", "Claude Code reduce tiempo de code review en 50%")
- Mide 4 semanas con Claude Code activo
- Survey corto contigo mismo o con el equipo: percepción (escala 1–5)
- Calcula ROI: costo Claude Code (Anthropic invoice) vs. tiempo ahorrado × costo/hora dev
- Compila en business case de 1 página para presentar a tech lead, gerente o equipo
- Documenta en
learnings-roi.md
Definition of Done
- Tienes baseline y métricas de 4+ semanas con Claude Code
- Tienes 1 página de business case
- Sabes articular ROI en lenguaje de negocio
- Conoces los límites de tus mediciones (heterogeneidad, confounders)
M24 · Aspectos legales e IP de código generado por IA
Por qué este módulo
🌐 No es un tema opcional. En 2025/26 hubo hitos jurídicos importantes que afectan cómo usas Claude Code:
- Anthropic cerró un class action de $1.5B en Ago/2025 — mayor settlement de copyright en EE.UU., ~$3,000/título por uso de obras en entrenamiento
- U.S. Copyright Office: código generado predominantemente por IA, sin autoría humana significativa, NO es elegible para copyright
- Indemnización por proveedor: Microsoft, Google, OpenAI y Anthropic ofrecen indemnización para uso enterprise — los términos varían
Necesitas entender lo suficiente para proteger tu trabajo (el tuyo, el de tu equipo, el de tu empresa) y navegar contratos con clientes.
Tópicos
Copyright y autoría 🌐
- Cuándo el código es "predominantemente IA": sin copyright
- Cuándo hay autoría humana significativa (iteración, edición, refinamiento): copyright atribuible al humano
- Implicaciones para empresa vs. contribuidor individual (work-for-hire)
Riesgo de infringement
- Código generado puede reproducir fragmento de fuente con licencia restrictiva (GPL, AGPL)
- Mayor riesgo en código de larga trayectoria de entrenamiento (ej: OpenSSL, Linux kernel)
- Mitigaciones: scanners de licencia (FOSSA, BlackDuck), filtros nativos del proveedor
Indemnización por proveedor
- Anthropic Commercial Terms — verificar cláusula de indemnización específica del plan
- Microsoft Copilot for Business/Enterprise — indemnización por copyright
- Google Gemini for Workspace — indemnización similar
- OpenAI — indemnización para Enterprise
Cláusulas en contratos con clientes
- Disclosure de uso de IA
- Atribución (
Co-authored-by: Claudees convención, no obligación legal) - Garantía de IP del output
- Exclusión de responsabilidad vs. indemnización traspasada
LGPD/GDPR
- Datos sensibles en el prompt/código
- Dónde se procesan los datos (jurisdicción)
- Derechos del titular (acceso, corrección, eliminación)
Materiales
Fuentes primarias ⭐
-
⭐ 🌐 📚 U.S. Copyright Office — Copyright and AI ·
[EN][Gratis]Posición oficial de EE.UU. Lectura obligatoria aunque no estés en EE.UU. — define el benchmark. -
🌐 📚 Anthropic — Commercial Terms ·
[EN][Gratis]Términos comerciales oficiales. Cláusulas de IP e indemnización.
Análisis ⭐
-
⭐ 🌐 📖 AI coding agents come with legal risk — CIO ·
[EN][Gratis]intermedio -
⭐ 🌐 📖 Generative AI Copyright: Law, Litigation & Best Practices in 2026 — AI Multiple ·
[EN][Gratis]