Medir lo que un agente IA le aporta: el método honesto

Encontrará promesas cifradas en todas partes sobre lo que la IA hace ganar. Ninguna concierne a su taller, su despacho o su restaurante. La única medida que cuenta es la que usted mismo realiza, en su trabajo, con sus cifras. No requiere ni software ni tabla complicada: un cuaderno, una semana de referencia y un poco de rigor son suficientes.

ILo que realmente se puede medir

Un agente aporta de cuatro formas, y cada una se mide de manera diferente. Ahorra tiempo: los minutos que ya no dedica a una tarea. Acorta plazos: un presupuesto enviado el mismo día en lugar de tres días después. Hace partir lo que no partía: el recordatorio que postergaba. Obtiene respuestas: un pago, una cita, un presupuesto firmado.

No siga los cuatro. Tome tres indicadores como máximo : uno en tiempo, uno en plazo o volumen, uno en resultado. Un fontanero que confía sus recordatorios de impagos seguirá, por ejemplo, los minutos dedicados a recordar, el número de recordatorios enviados, y el número de días entre el vencimiento y el pago.

Desconfíe de los indicadores que halagan sin decir nada. El número de correos preparados no vale nada si la mitad va a la papelera. El número de tokens consumidos mide un gasto, no una ganancia. Hágase siempre la misma pregunta: si esta cifra se duplica, ¿irá mejor mi empresa? Si la respuesta es incierta, cambie de indicador.

IIMedir antes de lanzar el agente

Es el paso que casi todo el mundo salta, y sin él ninguna comparación es posible. Durante una semana normal, antes de lanzar el agente, anote sus tres indicadores. Para el tiempo, anote la hora de inicio y de fin cada vez que realice la tarea. Para los plazos, revise los expedientes del mes anterior: las fechas figuran en sus correos y sus facturas.

Elija una semana representativa. Una semana de vacaciones o de máxima actividad lo distorsiona todo. Si su actividad es muy estacional, tome las cifras del mismo período del año pasado, cuando las tenga.

IIISeguimiento durante cuatro semanas

Lance el agente, luego anote los mismos indicadores cada semana, de la misma manera. Cuatro semanas es una duración razonable: la primera suele servir para el ajuste, durante la prueba en blanco y las primeras validaciones, y las tres siguientes muestran el régimen normal. No juzgue por la primera semana, que casi siempre es la peor.

La línea sobre los envíos validados sin retoque es valiosa. Si sube semana tras semana, sus ajustes están dando resultado: cada precisión añadida a la misión o a los documentos evita una retoque. Si se estanca, el problema suele venir de la consigna o de un documento faltante, no del agente en sí.

IVConfrontar el coste real

El costo de un agente no se limita a la suscripción. También incluye su tiempo de revisión, especialmente al principio, y el tiempo dedicado a configurar la misión. En ABYS, la suscripción va desde 19 euros sin IVA al mes por 100 000 tokens hasta 349 euros sin IVA por 5 millones, y la cuenta muestra el consumo. Su panel le indica si el depósito elegido es suficiente o si es demasiado grande.

Para dar un valor al tiempo ahorrado, no tome una cifra teórica. Hágase una pregunta simple: ¿qué ha hecho con esas horas? Un carpintero que pasa dos horas más en el taller puede cuantificarlas en trabajo facturado. Un gerente que las dedica a descansar obtiene un beneficio real, pero que no se cuantifica en euros. Los dos cuentan; solo diga cuál cuenta para usted.

VDecidir: continuar, ajustar o parar

Después de las cuatro semanas, coloque sus cifras de referencia junto a las de la última semana. La decisión sigue una lógica simple, que puede fijar de antemano para no engañarse.

Parar no es un fracaso. Una tarea mal elegida le enseña qué tarea elegir después. Continuar, en cambio, requiere mantener el seguimiento una vez al mes: una actividad cambia, y un agente que aportaba puede dejar de aportar.