NICKE STUDIO / Cómo elegir y evaluar una agencia de IA
Qué herramientas necesita una agencia de IA y cómo elegirlas · Chile
Elige herramientas para una agencia de IA según el flujo de trabajo, los datos, la evaluación y el mantenimiento. Compara capas y límites. Para equipos en Chile.
Leer en otro idioma ↗
Las buenas herramientas para una agencia de IA son las que permiten entregar un proceso útil, verificable y sostenible en operación. Una lista larga de suscripciones no es una arquitectura. Primero hay que definir la tarea, los datos necesarios, las acciones permitidas y la evidencia que demostrará si funciona.
Un asistente de soporte puede limitarse a buscar información aprobada y preparar un borrador. Eso no exige automáticamente un agente autónomo, una base vectorial separada ni cambiar el CRM. Cada capa adicional necesita una razón que siga teniendo sentido cuando toque mantenerla y entregarla al cliente.
Compara funciones antes de comparar marcas
| Capa | Opción útil | Qué revisar |
|---|---|---|
| Integración y automatización | n8n para conectar servicios; código para reglas simples | Licencia, credenciales, reintentos y duplicados |
| Orquestación con estado | LangGraph cuando existen decisiones y pasos persistentes | Recuperación, puntos de control y aprobación |
| Datos y recuperación | PostgreSQL; pgvector si la búsqueda vectorial aporta valor | Permisos, vigencia de fuentes y precisión |
| Evaluación | Pruebas propias y herramientas como OpenAI Evals | Casos pertinentes, criterios y regresiones |
| Observabilidad | Langfuse para trazas, costos y contexto de evaluación | Datos ocultados, conservación y acceso |
La tabla no es una compra obligatoria. Un flujo sencillo puede necesitar una base de datos, una API de modelos y una aplicación pequeña. El CRM existente debería seguir siendo la referencia de clientes, salvo que exista una razón documentada para sustituirlo.
El modelo se elige con pruebas de la tarea
Compara modelos usando las mismas entradas y las mismas condiciones de aceptación. Evalúa la calidad final, la latencia y el costo completo, incluidos reintentos y correcciones. Una llamada barata puede terminar en un proceso caro si exige demasiado trabajo posterior.
Incluye soluciones deterministas: una conversión de fecha, una validación fija o una búsqueda exacta pueden resolverse mejor sin un modelo generativo. Reserva la IA para las partes que realmente necesitan interpretación del lenguaje, extracción o síntesis. Valida el resultado antes de modificar un registro comercial.
Una herramienta pertenece al proyecto cuando resuelve un problema definido y alguien puede operarla después del lanzamiento. — Nota editorial de Nicke Studio
La orquestación necesita una razón
LangGraph ofrece infraestructura para agentes y flujos con estado. Puede servir cuando un proceso se bifurca, espera aprobación o debe continuar después de una interrupción. No es un requisito por el simple hecho de incorporar IA.
n8n permite organizar automatizaciones y conexiones, pero su Sustainable Use License establece restricciones y contempla condiciones empresariales separadas. Revisa el despliegue y el uso comercial propuestos. Poder instalarlo en un servidor no autoriza automáticamente cualquier reventa o servicio para terceros.
En ambos enfoques, pregunta qué pasa si una solicitud falla después de que la acción externa ya se ejecutó. Un reintento no debería enviar dos facturas o registrar dos veces un contacto. La agencia debe explicar esa recuperación en términos comprensibles.
La calidad de los datos incluye permisos y vigencia
PostgreSQL puede centralizar registros estructurados y controles de acceso. pgvector añade búsqueda vectorial, pero un índice no convierte cada documento recuperado en una fuente confiable. La información necesita responsables, versiones y reglas de acceso.
Prueba si los datos de un cliente pueden filtrarse en la respuesta de otro. Define cómo se retiran documentos eliminados o sustituidos. Si la búsqueda actual ya cumple el objetivo, crear embeddings puede añadir costos sin mejorar una decisión importante.
Evaluación y observabilidad responden preguntas distintas
OpenAI Evals sirve como referencia de evaluación repetible. Langfuse ofrece trazas y funciones relacionadas con evaluación. Evaluar pregunta si un resultado cumple el requisito; observar permite entender qué ocurrió durante una ejecución. El proyecto debe responder ambas preguntas, aunque elija otras herramientas.
No registres conversaciones completas por defecto. Acuerda qué campos se necesitan, cómo se ocultan datos sensibles, cuánto tiempo se conservan y quién puede verlos. Un panel con información personal también es un sistema de datos que requiere control.
## Llevarlo a tu equipo
Para un equipo en Chile, parte de consultas reales, canales comerciales utilizados y términos que el responsable del negocio pueda validar. Aclara quién aprueba el contenido y quién mantiene las integraciones. Define moneda, calendario de revisión y documentación de entrega para que la coordinación remota no convierta una duda operativa en una dependencia permanente. Prueba la herramienta con documentos, consultas y permisos que representen a tu equipo. No bases la compra en una demostración preparada con datos de otro sector. Confirma que existe una persona responsable de las actualizaciones y que la información puede exportarse sin depender de una suscripción adicional no presupuestada.
Elige un conjunto pequeño que puedas mantener
- Describe un proceso y sus posibles fallos.
- Identifica los sistemas que seguirán siendo la fuente oficial.
- Prueba la combinación mínima de herramientas.
- Compara calidad, revisión y costo de operación.
- Documenta propiedad, copias de seguridad y mantenimiento.
Pide un presupuesto para el volumen esperado y para otro mayor. Separa software, consumo de modelos, alojamiento, soporte e implementación. Las tarifas cambian: una cotización fechada aporta más que sumar precios encontrados en un listado antiguo.
Nuestra guía de open source desarrolla las licencias y responsabilidades. El artículo de impacto ambiental incorpora el uso de recursos y la guía de resultados reales explica qué medir. Consulta nuestros servicios o envíanos tus necesidades para plantear un conjunto de herramientas ajustado al proceso.