Wharton: medir resultados de IA

Usar una herramienta todos los días puede convertirse en una costumbre sin aclarar qué mejora. Antes de ampliar una suscripción o delegar otro proceso, conviene reconstruir una cadena sencilla: qué trabajo se hizo, qué resultado aceptó alguien y qué valor quedó después de pagar el esfuerzo completo. Esa cadena permite discutir una inversión con ejemplos comprobables.

Una encuesta para abrir la conversación

Wharton y GBK publicaron el 13 de octubre una encuesta transversal repetida: 1.007 directivos y 409 empleados estadounidenses, analizados por separado. Campo: 9–29 de julio de 2026; empresas de al menos mil trabajadores y más de US$50 millones de ingresos.

Declaró retornos muy positivos el 35% de los directivos con métricas de crecimiento y el 13% con sólo eficiencia: asociación autodeclarada, no efecto causal ni estimación para Chile.

Para convertir esa conversación en una decisión propia, hace falta formular una pregunta que el equipo pueda responder con evidencia. Por ejemplo: ¿esta forma de preparar un documento mantiene la calidad requerida y deja un saldo favorable después de revisarlo? El ejercicio siguiente propone cómo comprobarlo. Es una elaboración educativa original; sus condiciones son ficticias y no describe resultados observados.

Elegir una tarea que tenga final

Imaginemos un pequeño taller de reparación de bicicletas que quiere preparar fichas de mantenimiento para sus clientes. La IA podría ordenar las notas de una revisión realizada por una persona. El ejercicio se limita a redactar el documento: el diagnóstico técnico, la autorización del trabajo y la entrega al cliente siguen en manos del taller.

La entrada sería una ficha ficticia con trabajos realizados, materiales utilizados y observaciones del mecánico. La salida aceptable debe conservar esos datos, distinguir lo realizado de lo recomendado y dejar visibles las preguntas pendientes. El texto termina cuando una persona responsable lo contrasta con la ficha y lo aprueba. Un borrador generado todavía no cumple esa condición.

Antes de probar, escribe los motivos de rechazo: añadir una pieza que nadie cambió, omitir una advertencia registrada o presentar una sugerencia como trabajo cobrado. Un documento con cualquiera de esos problemas vuelve a revisión. La buena presentación no compensa una modificación de los hechos.

Guardar una referencia sin IA

El baseline es una referencia del procedimiento habitual. Conserva una ficha de entrada y pide que se prepare el documento con el método que el taller conoce. Registra el tiempo dedicado, las consultas necesarias y las correcciones antes de aprobarlo. Guarda también la versión final aceptada, porque permite observar qué significa terminar bien esa tarea.

Después puede prepararse otra versión a partir de la misma entrada ficticia mediante IA. Conviene mantener la plantilla, los requisitos y el criterio de aprobación. Si una versión dispone de notas completas y la otra recibe apuntes incompletos, la comparación mezcla dos cambios. Documenta cualquier diferencia que no puedas evitar y reduce el alcance de la conclusión.

El orden de trabajo también importa: quien ya resolvió el documento podría recordar la respuesta. Para explorar ese problema, alterna el orden con otras fichas ficticias de dificultad semejante. Conserva cada intento, incluso el descartado. No hace falta presentar el ejercicio como experimento científico para reconocer sus posibles sesgos.

Comprobar calidad antes de sumar minutos

Prepara una pauta que permita revisar ambas versiones sin premiar automáticamente la más extensa. El revisor debe poder localizar cada dato relevante en la entrada, entender qué se hizo y reconocer qué falta confirmar. Cuando una frase no tiene respaldo, se elimina o se devuelve como pregunta; no se completa por intuición.

Registro de la tarea	Comprobación antes de aceptar
Datos utilizados	Vincular cada trabajo y material con la ficha de entrada.
Estado del documento	Marcar borrador, devuelto para corregir o aprobado por el responsable.
Correcciones	Anotar qué cambió, quién lo detectó y cuánto trabajo requirió.
Datos ausentes	Dejar la pregunta pendiente y devolverla a quien pueda resolverla.
Decisión sobre la prueba	Continuar, ajustar o detener según los criterios fijados antes de empezar.

Con esa pauta puedes distinguir un error de contenido de una preferencia de estilo. Cambiar un saludo no tiene la misma consecuencia que inventar una intervención. Registra ambos si consumen tiempo, pero explica su importancia por separado. Así evitas que una lista de pequeños retoques oculte un fallo que impide usar el documento.

Contar el coste completo y su destino

El reloj debe cubrir la preparación de las notas, la generación, la espera que interrumpe otra actividad, la revisión y las correcciones. Añade la configuración inicial y el mantenimiento de la plantilla como partidas separadas. Una mejora aparente puede desaparecer si sólo se mide el intervalo entre enviar una instrucción y recibir texto.

En dinero, registra qué parte del servicio se utiliza y qué otros gastos exige sostenerlo. No conviertas créditos en moneda sin conocer las condiciones aplicables. La explicación de cómo elegir y controlar consumo en Notion ofrece un contexto relacionado para pensar esa diferencia. Para esta prueba, cualquier precio desconocido queda pendiente, con su responsable de confirmación.

También hay que decidir qué ocurriría con el tiempo liberado, si llegara a existir. Poder dedicarlo a atender una bicicleta no equivale a haber vendido una reparación adicional. Anota por separado capacidad disponible, actividad efectivamente realizada e ingreso comprobado. Si no puedes valorar alguno de esos pasos, informa el límite en lugar de completar una cifra de retorno.

Decidir con una salida reversible

Antes de ampliar el uso, acuerda qué evidencia justificaría continuar y qué fallo obligaría a detenerlo. El taller podría exigir que todos los documentos aprobados sean fieles a sus fichas y que la revisión resulte sostenible. Es un criterio propuesto para el ejercicio, no una promesa de que la herramienta lo cumplirá.

La reversibilidad se prepara conservando el método anterior, las entradas y los documentos aprobados en un formato accesible. Asigna a alguien la decisión de volver atrás y evita que la prueba envíe mensajes o modifique cobros por su cuenta. Una autorización para redactar no necesita incluir permiso para actuar sobre el cliente.

Revisa la decisión cuando cambien la herramienta, la plantilla o el tipo de tarea. La soltura del texto puede aumentar la sensación de seguridad sin resolver la comprobación pendiente; el artículo sobre confianza percibida en IA ayuda a mantener esa pregunta abierta. Conserva el motivo de cada aprobación para poder discutirlo después.

Preguntas frecuentes

¿Sirve contar cuántas personas usan la herramienta?

Sirve para conocer el alcance de una prueba. Para decidir sobre su valor, conecta ese registro con tareas terminadas y aceptadas. Si nadie puede mostrar una salida utilizable, todavía falta una parte esencial de la evaluación.

¿Qué hago si mejora el tiempo pero empeora la calidad?

Aplica el criterio de rechazo acordado. Puedes ajustar la entrada o acotar la tarea y volver a observarla. No declares favorable una versión que exige entregar información incorrecta para conservar la ventaja de tiempo.

¿Cómo trato un coste que todavía desconozco?

Déjalo visible como pendiente y explica qué decisión impide cerrar. Una estimación identificada puede ayudar a explorar escenarios; no debe aparecer como gasto observado ni como fundamento definitivo de una compra.

¿Cuándo puedo ampliar el ejercicio?

Cuando puedas explicar qué se comprobó, qué falló y quién sostendrá la revisión. Amplía gradualmente a tareas parecidas, conservando la posibilidad de detenerte. Un caso aceptado no resuelve por adelantado todos los trabajos del taller.

Compartir una decisión que se pueda revisar

Al cerrar la prueba, reúne entrada, salida aprobada, correcciones, tiempos y gastos conocidos. Termina con una decisión concreta y sus pendientes. Ese registro permite que otra persona entienda por qué continuar o detenerse, incluso si no estuvo durante la prueba.

Si quieres trabajar estos criterios con otros profesionales, entra a la Comunidad de Álvaro y comparte una tarea ficticia, su criterio de aceptación y la duda que necesitas resolver.

Fuentes: Wharton · Informe completo.