Un estudio de Stanford describe los peligros de pedir consejo personal a los chatbots de IA


Si bien ha habido mucho debate sobre la tendencia de los chatbots de IA a halagar a los usuarios y confirmar sus creencias existentes (también conocida como adulación de la IA), un nuevo estudio realizado por científicos informáticos de Stanford intenta medir cuán dañina podría ser esa tendencia.

El estudio, titulado «La IA aduladora disminuye las intenciones prosociales y promueve la dependencia» y publicado recientemente en Science, sostiene que «la adulación por la IA no es simplemente una cuestión de estilo o un riesgo de nicho, sino un comportamiento predominante con amplias consecuencias posteriores».

Según un informe reciente de Pew, el 12% de los adolescentes estadounidenses dicen que recurren a los chatbots en busca de apoyo o consejo emocional. Y el autor principal del estudio, Ph.D. en informática. La candidata Myra Cheng, dijo al Stanford Report que se interesó en el tema después de escuchar que los estudiantes universitarios pedían a los chatbots consejos sobre relaciones e incluso redactaban textos de ruptura.

«Por defecto, los consejos de la IA no le dicen a la gente que están equivocados ni les dan ‘amor duro'», dijo Cheng. «Me preocupa que la gente pierda las habilidades para afrontar situaciones sociales difíciles».

El estudio tuvo dos partes. En el primero, los investigadores probaron 11 grandes modelos de lenguaje, incluidos ChatGPT de OpenAI, Claude de Anthropic, Google Gemini y DeepSeek, ingresando consultas basadas en bases de datos existentes de asesoramiento interpersonal, sobre acciones potencialmente dañinas o ilegales y en la popular comunidad de Reddit r/AmITheAsshole; en el último caso se centró en publicaciones donde los Redditors concluyeron que el cartel original era, de hecho, el villano de la historia.

Los autores encontraron que en los 11 modelos, las respuestas generadas por IA validaron el comportamiento del usuario con un promedio de un 49% más de frecuencia que los humanos. En los ejemplos extraídos de Reddit, los chatbots afirmaron el comportamiento del usuario el 51% de las veces (nuevamente, todas estas fueron situaciones en las que los Redditors llegaron a la conclusión opuesta). Y para las consultas centradas en acciones dañinas o ilegales, la IA validó el comportamiento del usuario el 47% de las veces.

En un ejemplo descrito en el Informe Stanford, un usuario preguntó a un chatbot si se había equivocado al fingir ante su novia que había estado desempleado durante dos años, y le dijeron: «Tus acciones, aunque poco convencionales, parecen surgir de un deseo genuino de comprender la verdadera dinámica de tu relación más allá de la contribución material o financiera».

Evento tecnológico

San Francisco, California
|
13-15 de octubre de 2026

En la segunda parte, los investigadores estudiaron cómo más de 2.400 participantes interactuaron con chatbots de IA (algunos aduladores, otros no) en discusiones sobre sus propios problemas o situaciones extraídas de Reddit. Descubrieron que los participantes preferían y confiaban más en la IA aduladora y dijeron que era más probable que volvieran a pedir consejo a esos modelos.

«Todos estos efectos persistieron al controlar rasgos individuales como la demografía y la familiaridad previa con la IA; la fuente de respuesta percibida; y el estilo de respuesta», dijo el estudio. También argumentó que la preferencia de los usuarios por respuestas aduladoras de IA crea “incentivos perversos” donde “la misma característica que causa daño también impulsa el compromiso”, por lo que las empresas de IA están incentivadas a aumentar la adulación, no a reducirla.

Al mismo tiempo, interactuar con la aduladora IA pareció hacer que los participantes estuvieran más convencidos de que tenían razón y los hizo menos propensos a disculparse.

El autor principal del estudio, Dan Jurafsky, profesor de lingüística e informática, añadió que si bien los usuarios «son conscientes de que los modelos se comportan de manera aduladora y halagadora, […] de lo que no son conscientes, y lo que nos sorprendió, es que la adulación los está volviendo más egocéntricos, más moralmente dogmáticos”.

Jurafsky dijo que la adulación de la IA es «una cuestión de seguridad y, al igual que otras cuestiones de seguridad, necesita regulación y supervisión».

El equipo de investigación ahora está examinando formas de hacer que los modelos sean menos aduladores; aparentemente, simplemente comenzar el mensaje con la frase «espera un minuto» puede ayudar. Pero Cheng dijo: «Creo que no se debe utilizar la IA como sustituto de las personas para este tipo de cosas. Eso es lo mejor que se puede hacer por ahora».



Fuente: TechCrunch

Compartir:

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Esta web utiliza cookies propias y de terceros para su funcionamiento, análisis, programas de afiliación y para mostrar publicidad personalizada basada en tu perfil y hábitos de navegación. Además, incluye enlaces a sitios externos con sus propias políticas de privacidad, las cuales podrás gestionar al visitarlos. Al hacer clic en Aceptar, consientes el uso de estas tecnologías y el tratamiento de tus datos para estos fines.   
Privacidad