Cata a Ciegas de Modelos

En una frase

Cada vez que sale un modelo nuevo de vídeo, música o texto, y antes de que el ruido de las redes decida por nosotros, AIAO organiza una sesión en directo donde se prueban cuatro herramientas con los nombres ocultos (Modelo A, B, C y D) y los mismos prompts. Los socios votan a ciegas y al final se destapan las marcas.

El lore

El Sommelier no cree en etiquetas. En su bodega las botellas no tienen nombre, solo una letra pintada con tiza. Ha visto modelos de moda que en la copa sabían a agua y modelos olvidados con un cuerpo extraordinario. Por eso sirve a ciegas, apunta lo que dice cada catador y solo al final gira las botellas. Algunas noches el favorito de las redes acaba último, y la sala estalla.

Cómo funciona

Al salir un modelo relevante, el equipo de cata prepara 5 prompts de prueba que cubren casos difíciles (manos, movimiento rápido, texto en imagen, voces, coherencia).
Los cuatro modelos se ejecutan con los mismos prompts y, cuando se puede, con los mismos ajustes, duración y resolución.
En directo se muestran los resultados agrupados por prompt y en orden aleatorio, etiquetados solo como A, B, C y D.
Los socios votan cada ronda en una escala de 1 a 5 en calidad, fidelidad al prompt y utilidad real.
Se destapan las marcas, se comparan los votos con lo que se decía en redes y se publica la ficha de cata con la metodología.

Normas

Quien prepara la cata conoce los nombres y por eso no vota.
Se publican los prompts y ajustes usados para que cualquiera pueda repetir la prueba.
Quien tenga relación con alguna de las empresas lo declara antes de la sesión.
No se aceptan pagos ni regalos de las marcas a cambio de participar en una cata.
El resultado es la opinión de los socios en esa prueba, no una verdad absoluta, y así se comunica.

Ideas para llevarlo más lejos

💡 «Cata vertical»: el mismo modelo en sus distintas versiones para ver si mejora de verdad.
💡 Cata de herramientas gratuitas contra de pago.
💡 Un ranking histórico de catas en la web con la evolución de cada modelo.
💡 Formato breve en vídeo para redes: «¿Cuál elegirías tú?» con el destape al final.
💡 Catas para instituciones: comparar herramientas para un uso concreto (educación, archivo, accesibilidad).

Herramientas

Acceso a los modelos que se comparan, un sistema para aleatorizar y anonimizar resultados, votación en directo y plantilla de ficha de cata.

Entregables

Sesión grabada, ficha de cata con prompts, ajustes y votos, y el ranking histórico.