Auditar al agente: el 100% de las conversaciones, no una muestra

El gerente de una agencia de seminuevos en Cuautitlán me contó cómo supervisa a sus cinco vendedores: cada viernes escucha diez llamadas y lee veinte chats de WhatsApp. Esa semana el equipo había tenido unas 400 conversaciones. Es decir, revisa menos del 8%, elegido al azar o por queja. Lo demás, confía.

Cuando le puse un agente de IA para calificar prospectos, me hizo la pregunta correcta: “¿Y a ese quién lo supervisa?”. Porque si a cinco personas no les alcanza para revisarlas, un agente que atiende de noche y fines de semana genera más conversaciones que todo el equipo junto.

Mi respuesta es la tesis de este artículo: cuando supervisas humanos, auditas una muestra porque no te queda de otra. Cuando tienes agentes, auditar una muestra es una decisión, y es la equivocada.

Por qué la muestra siempre fue un parche

Nadie revisa el 8% porque crea que es suficiente. Lo hace porque leer 400 chats a la semana no es trabajo de un gerente. La muestra es un parche a la falta de tiempo.

El problema es lo que se esconde en el 92% restante. En los negocios que he revisado, ahí están el vendedor que promete un descuento que no existe, la recepcionista que da el diagnóstico por WhatsApp, el cobrador que amenaza, y el cliente que dijo tres veces “ya no me escriban” y le siguieron escribiendo. Ninguno sale en la muestra del viernes. Salen cuando ya hay reseña de una estrella o carta de un abogado.

Con un agente de IA el riesgo cambia de forma. Un humano se equivoca distinto cada vez. Un agente mal configurado se equivoca igual, cientos de veces, en silencio. Si la muestra del viernes no cae en una de esas, el error corre un mes.

Lo que hace un Axora Auditor

Un Axora Auditor revisa el 100% de las conversaciones y llamadas de tu negocio, las de tus personas y las de tus otros agentes, contra una rúbrica. Rúbrica es la lista de lo que para ti es una buena conversación: saludó, verificó identidad antes de dar información, no prometió lo que no se puede, ofreció la cita, cerró con siguiente paso, no usó cierta palabra.

Marca cada hallazgo con evidencia: el fragmento exacto del chat o el minuto de la llamada. No te dice “el vendedor estuvo flojo”. Te dice “en esta conversación, aquí, prometió entrega en 24 horas y la política dice 72”. Y te muestra tendencias por equipo y por persona: qué regla se rompe más, quién mejora, qué pregunta de cliente nadie sabe contestar.

La rúbrica la escribes tú con nosotros en el diagnóstico de proceso. El agente no inventa el criterio: aplica el tuyo, sin cansarse y sin preferencias. Y lo que encuentra lo revisa una persona. El Auditor señala; el gerente decide. Una persona siempre detrás, también aquí.

Esto es control de calidad y es cumplimiento al mismo tiempo

Lo que me gusta de auditar todo es que un mismo mecanismo resuelve dos problemas que los dueños suelen ver separados.

El primero es calidad de servicio. Sabes con evidencia cómo se atiende a cada cliente, no cómo crees que se atiende. Y el equipo lo recibe mejor cuando el hallazgo viene con el fragmento exacto: no es la opinión del jefe, es lo que se dijo.

El segundo es cumplimiento. La LFPDPPP te obliga a proteger datos personales y a respetar lo que dice tu aviso de privacidad. Con auditoría completa puedes demostrar que el agente de cobranza no amenazó a nadie, que nadie dio datos de un cliente a un tercero por WhatsApp, y que cuando un cliente pidió que dejaran de escribirle, se le dejó de escribir. Esa evidencia es la diferencia entre “creemos que cumplimos” y “aquí está el registro”.

Dónde entra ISO 42001

ISO publicó en diciembre de 2023 la norma ISO/IEC 42001, el primer estándar de sistema de gestión para inteligencia artificial. Está pensada para cualquier organización que desarrolle o use IA, de cualquier tamaño, y busca que la IA se use con trazabilidad, transparencia y confiabilidad. Te la resumo sin jerga: la norma pide que sepas qué hacen tus sistemas de IA, que puedas demostrarlo y que alguien sea responsable.

Una PyME no necesita certificarse en 42001. Pero la pregunta que la norma hace sí aplica a cualquier negocio con un agente: ¿puedes demostrar lo que tu IA le dijo a tus clientes? Si tu respuesta es “reviso diez a la semana”, no puedes. Si es “las reviso todas y aquí están los hallazgos”, ya operas como la norma espera, sin certificado.

Es el mismo criterio de Blindaje Empresarial con ISO 27001: alinearte al estándar te sirve aunque nunca te certifiques, porque te obliga a tener el control y la evidencia.

Lo que el Auditor no debe ser

Lo he visto mal hecho. Un auditor de conversaciones no es una herramienta para espiar al equipo ni para despedir con pretexto. Si lo usas así, tu equipo lo va a sabotear y con razón.

Mi regla: la rúbrica se comparte con el equipo antes de prenderlo, los hallazgos se usan primero para capacitar, y las tendencias se discuten en junta. Cuando el vendedor ve que el Auditor también señala lo que hizo bien, deja de ser el policía y se vuelve el entrenador. Por eso en nuestro catálogo está en la misma familia que Axora Entrenador.

Qué puedes hacer esta semana

1. Calcula tu porcentaje real: conversaciones que tuvo tu equipo la semana pasada contra las que alguien revisó. Ese número es tu punto de partida.
2. Escribe tu rúbrica en diez líneas: qué tiene que pasar en toda conversación con un cliente y qué no debe pasar nunca. Si no la tienes escrita, tu equipo tampoco la tiene.
3. Toma cinco chats al azar de la semana y califícalos tú con esa rúbrica. Lo que encuentres en cinco, multiplícalo.
4. Si ya tienes un chatbot o agente, pide a tu proveedor el registro completo de sus conversaciones del último mes. Si no te lo pueden dar, no puedes auditar nada.
5. Define qué pasa cuando aparece un hallazgo grave: quién lo ve, en cuánto tiempo, qué se hace.

Cómo ayuda AgileNext

Un Axora Auditor revisa el 100% de los chats y llamadas de tu equipo y de tus agentes contra la rúbrica que definimos contigo en el diagnóstico de proceso sin costo, marca hallazgos con evidencia y te muestra tendencias por equipo; y dentro de Blindaje Empresarial, esa evidencia se vuelve parte de los controles que puedes demostrar a clientes y socios, alineados a ISO 27001 y con la lógica de ISO 42001 sin obligarte a certificarte.

Agenda una llamada de 20 minutos y calculamos juntos qué porcentaje de tus conversaciones hoy nadie revisa.

Te puede interesar: Tu negocio cierra a las 7, tu recepcionista de IA no · Contraseñas, MFA y gestores: lo mínimo defendible en 2026