Cómo probar una herramienta de IA con una tarea real en 45 minutos

Probar una herramienta de IA no es pedirle tres frases y mirar si suena bien. Es ponerla a hacer una tarea real tuya, con material tuyo, y anotar qué hizo, qué falló y cuánto costaría usarla cada semana.

Esta guía te propone una prueba de 45 minutos. Sirve para asistentes de escritura, resumen, código, atención o búsqueda. No necesitas cambiar tu plan ni comprar nada para seguirla.

1. Elige una tarea acotada

Elige una sola tarea que hagas cada semana y que duela si sale mal. Por ejemplo: resumir un informe de dos páginas en cinco puntos verificables, redactar una respuesta a cliente con tus datos, o explicar un error de código con tu propio registro.

Escríbela en una frase con entrada, salida y límite: qué le das, qué debe devolver y qué no debe inventar. Si no puedes escribir ese límite, la tarea es demasiado grande. Córtala por la mitad.

2. Prepara tu material y tu registro antes de empezar

Usa material real pero no sensible. Quita nombres de clientes, claves, historias clínicas, datos bancarios o accesos. Si trabajas en clínica o redacción, usa un caso ya publicado o anonimizado.

Abre una tabla con estas columnas: hora, prompt exacto, salida obtenida, tiempo, errores, verificación y decisión. Guarda enlaces a la documentación oficial que uses. En Radar de IA enlazamos siempre las fuentes originales para que puedas verificar cada dato; haz lo mismo en tu prueba.

3. Ejemplo hipotético — marcado como ilustración, no es un test real

Ejemplo hipotético para mostrar cómo llenar la plantilla, no es resultado medido:

Tarea: resumir un acta interna de 1.800 palabras en 5 puntos con cifras.

La herramienta devuelve 5 puntos en 40 segundos. Dos cifras coinciden con el acta, una queda ambigua y dos no tienen página de referencia. Anotas: útil para borrador, no válida para enviar sin revisar. Tiempo ahorrado estimado: 20 minutos. Tiempo de revisión: 15 minutos. Ahorro neto: 5 minutos.

La lección no es la cifra, es el método: sin registro no sabes si ahorraste o solo cambiaste trabajo de escritura por trabajo de corrección.

4. Provoca tres errores a propósito

Una buena prueba busca el fallo. Pide:

1. una fuente que debe citar;
2. un dato que no está en tu material;
3. una instrucción contradictoria.

Anota si inventa, si avisa que no lo sabe o si pide aclaración. Eso vale más que diez aciertos fáciles.

Si la herramienta dice no tener una función, verifícalo en su documentación oficial actual antes de anotarlo como límite. No uses capturas inventadas ni afirmes precios o planes de memoria.

5. Preguntas de costo y control

Responde por escrito:

• ¿cuánto cuesta por mes con tu volumen real?
• ¿qué plan o límite te aplica?
• ¿dónde quedan tus datos?
• ¿puedes exportar y borrar?
• ¿quién revisa antes de publicar o enviar?

Si no encuentras la respuesta en la documentación oficial, anota “no verificado” en vez de suponer.

6. Criterios para decir sí, no o seguir probando

Da por buena la herramienta solo si cumple estas cuatro:

1. completa la tarea sin inventar datos clave;
2. muestra sus fuentes o pasos cuando se lo pides;
3. el ahorro tras revisar supera 15 minutos por uso;
4. sabes costo, privacidad y salida.

Si falla en inventos o en fuentes, es un no por ahora. Si solo falla en formato, pide otra vuelta con instrucciones más estrictas.

7. Plantilla copiable — tu hoja de evaluación

Copia esto tal cual:

Tarea en una frase: [entrada + salida esperada + límite]
Material usado: [describe sin datos privados]
Prompt 1 exacto: [...]
Salida 1: [pega o resume + tiempo]
Verificación: [qué comprobaste y con qué fuente]
Errores: [invento / cita faltante / formato / negativa correcta]
Costo: [plan, límite, precio solo si lo viste en doc oficial con fecha]
Privacidad: [dónde quedan datos / borrado / exportación: verificado o no verificado]
Decisión: [sí / no / otra prueba de 20 min con ajuste ...]

Guarda esa hoja. Si pruebas otra herramienta la semana que viene, compara hoja contra hoja, no recuerdo contra recuerdo.

Para seguir en Radar de IA: si tu tarea toca agentes, lee antes nuestra sección de guías, en particular Agentes de IA, y el Glosario de IA para usar los mismos términos. Y si cubres noticias del sector, revisa un artículo reciente con fuentes enlazadas para ver cómo documentamos.