Muchos agentes se prueban directo con clientes reales y todos los permisos, y el primer error grave termina con el proyecto. Otros se prueban tan poco que nunca hay evidencia para decidir.
Para quién es
Pymes que ya decidieron probar un agente o una automatización con IA (propia o de un proveedor) y quieren hacerlo en dos a cuatro semanas con reglas claras.
El piloto tiene tres fases: datos de prueba, sombra (el agente propone, la persona decide) y producción limitada. Solo pasas a la siguiente cuando se cumple el criterio de éxito que escribiste antes de empezar.
El protocolo, paso a paso
-
Elige un caso frecuente, acotado y reversible
Frecuente para tener evidencia rápido, acotado para saber qué entra y qué no, reversible para que un error se pueda deshacer. Buen ejemplo: clasificar solicitudes entrantes. Mal ejemplo: aprobar descuentos.
-
Escribe éxito, fallo y cuándo se detiene
Antes de encender nada, llena esta ficha y compártela con el equipo.
Copia y pegaCaso: ... Éxito: el agente acierta en [X] de cada 10 casos revisados durante [N] días. Fallo: [qué cuenta como error grave]. Se detiene si: ocurre un error grave, o [condición]. Responsable del piloto: ... Fecha de revisión: ...
-
Fase 1: datos de prueba
Arma un set de 20 a 30 casos reales del pasado, sin datos sensibles, con la respuesta correcta que dio tu equipo. Pásalos por el agente y compara. No toques producción hasta pasar esta fase.
Copia y pegaCompara la respuesta del agente con la respuesta correcta en cada caso: [PEGA TABLA]. Dime en cuántos coincide, en cuáles falla, qué patrón tienen los errores y si alguno sería grave según esta definición: [PEGA FALLO].
-
Fase 2: modo sombra
El agente trabaja con casos reales pero solo propone; una persona decide y ejecuta. Anota en cada caso si la propuesta era correcta. Esto compara el agente contra tu proceso humano actual sin riesgo.
-
Compara contra el proceso humano
Al final de la fase 2 mira lado a lado: tiempo por caso, errores, casos que el agente no supo resolver. Si no mejora al proceso humano en lo que definiste como éxito, el piloto terminó y eso también es un buen resultado.
-
Fase 3: producción limitada
Deja que ejecute solo en una parte acotada: un tipo de caso, un horario o un porcentaje de los casos, con tope diario y botón de parada. Las acciones irreversibles siguen con aprobación humana. Revisa una muestra cada semana.
-
Amplía permisos solo con evidencia estable
Amplía un paso a la vez y solo cuando el criterio de éxito se cumplió de forma estable en la fase anterior. Si aparece un error grave, vuelves una fase atrás.
Errores comunes
- Definir el éxito después de ver los resultados. Escríbelo antes de encender nada.
- Saltarse el modo sombra porque la demo salió bien.
- Probar con casos inventados. Usa casos reales del pasado de tu negocio.
- Ampliar todos los permisos a la vez cuando el piloto sale bien.
Para quién NO es
Si todavía no sabes si tu proceso necesita un agente, empieza por las guías FILTRO y DECISIÓN de la Bóveda. Este protocolo es para cuando ya elegiste qué probar.
¿Lo quieres aplicado a tu negocio?
Si prefieres no armarlo solo, agenda 30 minutos conmigo y lo revisamos con tu caso real. Si todavía no sabes por dónde empezar, el mapa te dice qué automatizar primero en 5 preguntas.