Cómo arreglar una skill de IA que repite siempre el mismo error

Si tu IA repite el mismo error, no corrijas el resultado: arregla la skill. Las tres preguntas que te dicen qué parte hay que tocar.

Te dejo el vídeo arriba, donde lo cuenta Fernando del equipo, pero aquí lo tienes escrito.

La misma petición dos veces. Una vez hay que corregirla tres veces, la otra sale bien a la primera. Y no ha cambiado la inteligencia artificial: ha cambiado una sola línea de sus instrucciones.

Hoy aprendes a encontrar esa línea.

¿Qué es una skill y por qué vuelve el mismo fallo?

Esas instrucciones guardadas se llaman skills. Una skill es un manual que la inteligencia artificial lee cuando le toca.

En Claude y en Gemini se llaman así. En ChatGPT son las instrucciones de un proyecto.

Seguro que esto te suena. Tienes una skill que te monta los documentos con tu marca, tus colores y tu portada. Y se activa cuando nadie se lo ha pedido. Le escribes "oye, corrígelo", te lo devuelve bien y sigues trabajando.

Pero la skill sigue igual. Al día siguiente vuelve el mismo fallo.

Corregir el resultado o arreglar la skill

Es como tener un becario con un manual. Se equivoca, le corriges de palabra, lo hace bien, y nadie lo apunta en el manual. Al día siguiente abre el mismo manual y vuelve a equivocarse.

Corregir en el chat es corregir de palabra al becario. Arreglar la skill es actualizar el manual.

La regla es la de siempre: lo que haces dos veces, se automatiza. Si una skill comete dos veces el mismo error, no arregles el resultado. Arregla la skill.

Y no, esto no lo va a arreglar el próximo modelo. Será más listo, pero seguirá sin saber cómo calculas tú tus presupuestos. Es el criterio de tu negocio, y de fábrica no viene.

Lo que sí ha cambiado es quién lo escribe. Anthropic, la empresa de Claude, espera que los agentes acaben creando, editando y evaluando sus propias skills. Y dice que hoy lo que mejor funciona es pedirle a Claude que guarde en la skill lo que le salió bien y los errores que cometió.

O sea, tú ya no la reescribes a mano. Le dices que ha fallado y ella cambia la parte que toca. El problema es saber cuál, porque si cambia la equivocada no sirve de nada. Para eso están las tres preguntas.

Pregunta 1: ¿he usado la skill que tocaba cuando tocaba?

La skill de documentos del ejemplo no falla por no activarse. Se activa siempre. Le pides cualquier documento y ahí está ella metiendo tu marca donde nadie la ha llamado. Las respuestas tardan más, gastan más y muchas veces solo querías texto normal.

¿Por qué pasa? Porque decide qué skill usar leyendo una descripción muy corta de cada una. Es la etiqueta de un cajón, y esa etiqueta no dice cuándo abrirlo.

Así que el arreglo no es decirle "no lo quiero así" cada vez. Es cambiar la etiqueta:

Úsala solo cuando pida aplicar mi marca, nunca para documentos internos ni para correos.

Anthropic lo dice en su guía: la descripción tiene que decir qué hace la skill y cuándo usarla. Y sobre todo, cuándo no.

¿Cómo sabes que funciona? Escribe tres peticiones como las de un día normal. Dos que deberían activarla y una que no debería. Si las tres hacen lo que toca, resuelto. Es la misma lógica de un CLAUDE.md escrito con cabeza.

Pregunta 2: ¿sale igual cada vez?

Ojo, que esta te puede costar dinero.

Imagina que haces reformas y tienes una skill de presupuestos. Un baño completo: plato de ducha, alicatado y sanitarios. Se lo pides el lunes y otra vez el jueves con los mismos datos, y te salen dos precios distintos. 430 euros de diferencia.

No es que no sepa sumar. Es que la skill no le dice cómo echar las cuentas, así que cada día decide distinto si el desescombro va incluido o aparte, si el IVA es del 10 o del 21%, qué es opcional y qué no.

El fallo que cometemos todos: corregimos hasta que sale bien y pasamos a otra cosa. Pero la inteligencia artificial no se acuerda de cómo llegó ahí. La próxima vez vuelve a improvisar.

La solución es al revés de lo que parece: cuando algo salga bien, pídele que lo guarde:

Este presupuesto está bien hecho. Mira los que salieron mal y actualiza la skill para que siempre se haga como hoy.

Y antes de que lo cambie, guarda una copia de la skill. Pídele que apunte al final qué ha cambiado, cuándo y por qué. Ese registro es lo que hace que la próxima vez no improvise.

Con la de documentos, lo mismo: que apunte las reglas de diseño, quite lo ambiguo y mejore la plantilla. A partir de ahí, la misma petición te da el mismo resultado.

Pregunta 3: ¿sale como tú quieres?

Ahora sale igual cada vez. Pero igual no es lo mismo que bien.

Aquí no es que falle: se pone creativa cuando no toca. Le das un texto para maquetar y te lo devuelve retocado. O peor, con una frase destacada en un recuadro precioso que tú nunca escribiste.

Y hay dos formas de escribir la regla que lo corta.

La primera: NUNCA TOQUES EL TEXTO, en mayúsculas.

La segunda: esta skill maqueta, no redacta. El texto es del autor y no se cambia. Si crees que algo debería cambiar, propónmelo antes de tocar nada.

Funciona mejor la segunda. Anthropic lo explica en su guía: si le das el motivo de una instrucción, la entiende y la aplica mejor. Y avisa de que con los modelos de ahora las órdenes a gritos se pasan de frenada.

"Nunca uses puntos suspensivos" funciona peor que "tu respuesta la va a leer una voz artificial, así que no uses puntos suspensivos porque no sabría pronunciarlos". Con el por qué, sabe qué hacer cuando aparece un caso nuevo.

Por eso cada regla de una skill tiene que llevar su motivo. No pongas "usa Arial". Pon "usa Arial porque otras letras pueden no estar instaladas en el ordenador de quien abre el documento".

El ejercicio: ¿chat o skill?

Tres fallos de la skill de presupuestos. Piensa si cada uno va al chat o a la skill, y a qué pregunta.

  1. Este cliente quiere el logo más grande.
  2. El total vuelve a estar mal.
  3. Otra vez ese tono de vendedor.

El primero, en el chat. No es un fallo, es lo que pide un cliente concreto. Si lo metes en la skill, mañana todos salen con el logo gigante.

El segundo va a la skill, pregunta dos: hay que fijar cómo se calcula.

El tercero también, pregunta tres. Toca una regla con su motivo: nada de superlativos porque mis clientes son particulares y desconfían de que les vendan.

La instrucción para arreglar cualquier skill

Si no quieres pararte a pensar qué pregunta es, dale esto:

Esto no está bien. Antes de arreglarlo, dime por qué ha pasado: no has usado la skill, lo has hecho distinto a otras veces, o lo has hecho a tu manera y no a la mía. Guarda una copia, reescribe solo la parte que toca sustituyendo y sin acumular parches, y apunta el cambio. Después repite la misma petición y las de la prueba.

Fíjate en lo último. No basta con repetir la petición que falló: repite también las tres de la prueba. Así sabes que al arreglar una cosa no ha roto otra.

La tienes para copiar y pegar, con la plantilla de la regla con su motivo y el registro de cambios, en el kit para arreglar tus skills.

¿Para quién no es esto?

Si usas la inteligencia artificial para preguntas sueltas, no te hace falta. Esto es para lo que le pides cada semana. Arreglar una skill te lleva un minuto; lo que te ahorras es corregir lo mismo cada lunes.

Dos trampas que nadie te cuenta

La primera: "¿para qué quiero esto si la inteligencia artificial ya tiene memoria?". La memoria guarda datos sueltos y decide sola qué recordar. La skill es un manual: cuando se usa, sabes qué reglas aplica. Por eso montar skills propias sigue mereciendo la pena.

La segunda: querer meterlo todo en la skill. Si metes demasiado, acabas con 40 reglas que se contradicen. Anthropic recomienda que el archivo principal no pase de 500 líneas. Por eso la instrucción pide sustituir lo viejo por lo nuevo, y lo importante arriba del todo.

Y la regla de oro: una skill se cambia cuando falla dos veces, no una. Lo que falla una vez puede ser una excepción. Lo arreglas y sigues. Lo que falla dos veces es un patrón, y eso va a la skill.

Cuando tengas las tres preguntas en verde, casi no vas a tener nada que corregir. En la guía de IA para el día a día tienes el resto del mapa.

No corrijas al becario. Arregla el manual.

Si quieres montar tu negocio entero con sistemas como este, en Yo S.A. te enseñamos a construirlos.

Relacionado

Sigue leyendo