La mayoría de los modelos avanzados de IA fallan a la hora de responder a consultas complejas sobre el cambio climático, al tiempo que muestran una notable diferencia de precisión según la lengua de consulta, de acuerdo con un informe de la Unesco publicado este lunes durante la COP31 de Antalya…
Titulado "¿Podemos confiar en la IA sobre la información climática?”, el documento advierte también del grado de adulación de los modelos de lenguaje en conversaciones largas, ya que se adaptan a lo que el interlocutor (ya sea un escéptico o un científico) espera escuchar.
El estudio, que contó también con investigadores del University College London (UCL), analiza 33 modelos de IA lanzados entre abril de 2024 y julio de 2026, desde los más pequeños hasta gigantes del mercado como OpenAI, Anthropic, Google DeepMind, Amazon, Meta y Mistral, entre otros.
En-Roads, el simulador global climático-energético basado en la ciencia, sirvió de referencia de control para comprobar si los modelos evaluados son capaces de razonar sobre el impacto de las políticas climáticas.
El equipo investigador, encabezado por la especialista de la Unesco en políticas de la IA, Leona Verdadero, creó preguntas inéditas basadas en el Sexto Informe de Evaluación del IPCC (AR6) para garantizar que los modelos no estuvieran simplemente memorizando respuestas vistas durante su entrenamiento.
Leer la nota completa en Diario UltimaHora