Ir al contenido principal

Estudio revela alta volatilidad en recomendaciones de marcas de ChatGPT, Claude y la IA de Google

2 min de lectura
Estudio revela alta volatilidad en recomendaciones de marcas de ChatGPT, Claude y la IA de Google

Un estudio conjunto de Rand Fishkin (SparkToro) y Patrick O’Donnell (Gumshoe.ai) analizó la consistencia de las recomendaciones de marca generadas por modelos de inteligencia artificial a partir de 2.961 pruebas realizadas por 600 voluntarios en Estados Unidos, usando 12 consultas distintas por participante para comparar respuestas de ChatGPT, Claude y la IA de Google.

Metodología del estudio

Los investigadores solicitaron a los voluntarios ejecutar 12 consultas diferentes en cada IA, repitiendo las pruebas un total de 2.961 veces, con el objetivo de evaluar cómo varían los listados de marcas o productos recomendados por estos sistemas en situaciones equivalentes.

Hallazgos principales

Las recomendaciones mostraron una alta inconsistencia. Frente a las mismas consultas, las IAs generaron listas de marcas distintas en cada respuesta, variando en tres dimensiones: las marcas incluidas en el listado, el orden de aparición y la cantidad de elementos presentados.

Las probabilidades de replicar exactamente el mismo listado de marcas en dos respuestas consecutivas fueron muy bajas: 0,74% para ChatGPT, 0,81% para la IA de Google y 1,65% para Claude. La probabilidad de que dos respuestas presenten exactamente el mismo orden de marcas es aún menor: 0,1% para ChatGPT, 0,28% para la IA de Google y 0,07% para Claude.

Observaciones sobre visibilidad de marca

A pesar de la baja consistencia entre respuestas, el estudio identifica que cierta visibilidad de marca persiste: determinadas marcas aparecen con mayor frecuencia en las respuestas de cada IA para consultas específicas. Esto sugiere que la presencia recurrente en múltiples respuestas puede ser más relevante que ocupar una posición fija en un único resultado.

Compartir:

Artículos Relacionados

OpenAI lanza un modo para adolescentes que se niega a darles la respuesta, un día antes de que Meta se siente en el banquillo por lo contrario
Inteligencia Artificial

OpenAI lanza un modo para adolescentes que se niega a darles la respuesta, un día antes de que Meta se siente en el banquillo por lo contrario

ChatGPT for Teens incluye un «Study Mode» que hace preguntas en vez de resolver, franjas horarias y medidas contra la dependencia. Es un producto diseñado para retener menos, y eso lo convierte en un movimiento de posicionamiento.

4 min
En cine y videojuegos, el área que más usa IA generativa no es la creativa: es la de marketing
Inteligencia Artificial

En cine y videojuegos, el área que más usa IA generativa no es la creativa: es la de marketing

El 58% de quienes trabajan en marketing y comunicación del sector usa IA generativa, frente al 30% de los estudios. La explicación no es tecnológica: el freno de los creativos es la propiedad intelectual.

4 min
Google regala un año de IA a los universitarios, pero fuera de Estados Unidos el regalo vale cuatro veces menos
Inteligencia Artificial

Google regala un año de IA a los universitarios, pero fuera de Estados Unidos el regalo vale cuatro veces menos

Los estudiantes estadounidenses reciben Google AI Pro; los de más de 140 países, Google AI Plus. Son 240 dólares de valor anual frente a 60. Y hace un año, según nuestra propia cobertura, en España la oferta era la buena.

3 min
Chrome ya lee las páginas por el usuario en Android, y con suscripción también actúa: qué le hace eso a su tráfico
Inteligencia Artificial

Chrome ya lee las páginas por el usuario en Android, y con suscripción también actúa: qué le hace eso a su tráfico

Gemini resume la página que usted tardó semanas en escribir, y auto browse llega a reservar o actualizar pedidos sin que nadie navegue. La visita consta; la lectura, no. De momento, solo en Estados Unidos.

3 min

Recién publicado