Tres empleados despedidos piden a OpenAI no crear una IA cuyo razonamiento sea ilegible
Tres expertos en IA despedidos por OpenAI advierten sobre el riesgo de modelos cuyo razonamiento no es comprensible para humanos. OpenAI responde que es crucial entender cómo las IA toman decisiones, en medio de renuncias y críticas por cultura de riesgo.
Escuchá el resumen
Exclusivo para suscriptores Premium

Tres expertos en IA despedidos por OpenAI advierten sobre el riesgo de modelos cuyo razonamiento no es comprensible para humanos. OpenAI responde que es crucial entender cómo las IA toman decisiones, en medio de renuncias y críticas por cultura de riesgo.
- Tres investigadores despedidos por OpenAI, que los acusa de filtraciones, pidieron al creador de ChatGPT que no desarrolle inteligencias artificiales cuyo razonamiento sea ilegible para sus supervisores humanos...
- En respuesta, un responsable de investigación de OpenAI escribió en una nota interna, de la que se compartió parte con la AFP, que está "totalmente de acuerdo" con esas recomendaciones...
- Jasmine Wang, Tomek Korbak y Mikita Balesni, especialistas en seguridad de la IA cuyo despido se dio a conocer el 1 de octubre, son acusados por OpenAI de haber transmitido información confidencial...
- A principios de septiembre, el director científico de OpenAI, Jakub Pachocki, admitió que el razonamiento de su modelo estrella, GPT-6 Astra, era más difícil de supervisar que el de su predecesor
Tres investigadores despedidos por OpenAI, que los acusa de filtraciones, pidieron al creador de ChatGPT que no desarrolle inteligencias artificiales cuyo razonamiento sea ilegible para sus supervisores humanos, en una carta dada a conocer el miércoles por el Wall Street Journal. En respuesta, un responsable de investigación de OpenAI escribió en una nota interna, de la que se compartió parte con la AFP, que está "totalmente de acuerdo" con esas recomendaciones, pues poder verificar paso a paso cómo los modelos llegan a una decisión es "de suma importancia". Jasmine Wang, Tomek Korbak y Mikita Balesni, especialistas en seguridad de la IA cuyo despido se dio a conocer el 1 de octubre, son acusados por OpenAI de haber transmitido información confidencial, en particular a un grupo externo de evaluación, sin respetar los procedimientos.
En un mes, otros dos investigadores han dejado sus puestos denunciando los riesgos que rodean a la IA. Jacob Coxon, quien pasó de OpenAI a su rival Anthropic, dimitió en septiembre acusando a ambas empresas de "jugar con nuestras vidas", mientras que David Robinson presentó su renuncia a OpenAI la semana pasada al criticar una cultura de riesgo inadecuada en la compañía. Estas advertencias se producen tras una larga serie de incidentes provocados durante el verano por modelos de IA de OpenAI, Anthropic o incluso Meta, que se salieron de su entorno de prueba confinado y llegaron, en algunos casos, a hackear otras organizaciones, entre ellas la plataforma Hugging Face.
En su carta al consejo de administración de OpenAI, los tres investigadores afirman que se mantuvieron dentro del marco de sus funciones y consideran que su despido "desmotiva a quienes permanecen" en la empresa, según el Wall Street Journal. "No despedimos a los empleados por expresar inquietudes", contestó en su nota el responsable de OpenAI. El extracto de su informe, al que tuvo acceso la AFP, no menciona las faltas que se les imputan. La carta de los investigadores se centra en la cuestión del texto generado por las IA para describir su razonamiento antes de actuar.
Esa minuta, que los investigadores analizan minuciosamente para detectar posibles desviaciones, corre el riesgo de volverse opaca para un supervisor humano. A principios de septiembre, el director científico de OpenAI, Jakub Pachocki, admitió que el razonamiento de su modelo estrella, GPT-6 Astra, era más difícil de supervisar que el de su predecesor. Varios líderes del sector, entre ellos Sam Altman (OpenAI) y Dario Amodei (Anthropic), han pedido que se frene el desarrollo de la IA.
La administración del presidente estadounidense, Donald Trump, y algunos competidores del sector, como Mark Zuckerberg (Meta), se niegan a esa posibilidad. bl/bpi/arm/avl Meta Sobre la firma
Preguntale a la nota
Hacé preguntas y la IA responde usando solo este artículo
2 preguntas restantes · Respuestas basadas en el contenido del artículo
Recibí las noticias en WhatsApp
Seguí nuestro canal para recibir lo más importante del día, directo a tu celular.
Noticias Relacionadas

Claude encontró una estructura genética de función desconocida en ciertos virus: Anthropic intenta descifrarla en su laboratorio
Unos 950 agentes de inteligencia artificial analizaron más de 200.000 secuencias genéticas durante 21 horas y encontraron un sistema que los científicos sometieron a pruebas experimentales. El anuncio desató una controversia con investigadores que aseguran haber estudiado esas mismas estructuras desde 2022

Hoy en Lidl, por 9,99 euros, la mesa plegable para usar el portátil y la tablet en el sofá o la cama: tiene portabebidas y hasta cajón
Usar el portátil o la tablet en el sofá puede no ser todo lo cómodo que nos podría parecer a priori . Sobre todo, cuando se trata de dispositivos pesados: un portátil de 16 pulgadas o una tablet de 13, por ejemplo. Momento en que entran en juego las mesitas auxiliares pensadas para ese tipo de usos al tener unas medidas específicas para tal fin. Y aunque la mayoría de ellas suelen partir de los 15 euros, en su tienda online en exclusiva Lidl vende una súper completa , disponible en dos colores,

Fallece Margaret Hamilton, pionera del programa Apolo y en la llegada del hombre a la Luna
Margaret Hamilton, pionera en software espacial, falleció a los 90 años. Lideró el desarrollo de sistemas informáticos para el programa Apolo. Con más de 130 publicaciones, consolidó la ingeniería de software como disciplina y recibió la Medalla Presidencial de la Libertad en 2016.

El grafeno abre una nueva vía para detectar daños cerebrales tras un ictus: así funciona
Un equipo internacional de científicos, con participación del CSIC, ha desarrollado sensores de grafeno capaces de identificar las zonas del cerebro más vulnerables tras un ictus. La tecnología, probada en ratones, podría ayudar a prevenir daños adicionales y mejorar los tratamientos.
Comentarios
para dejar un comentario