Volkswacht Bodensee - Un exinvestigador de OpenAI y Anthropic acusa a ambas empresas de no "actuar de manera responsable"

Jacob Coxon, un británico de 27 años, trabajó durante los últimos tres años en preentrenamiento, la etapa en la que los modelos de IA absorben grandes cantidades de información, primero en OpenAI y luego, desde este año, en su mayor rival, Anthropic.

"Ninguna de las dos empresas actúa de forma responsable. Están corriendo directamente hacia una superinteligencia capaz de mejorarse a sí misma y están jugando con nuestras vidas", escribió el martes en X.

"Las personas que están desarrollando la IA creen sinceramente que podría matarnos a todos antes de que termine la década. Esto no es una estrategia de mercadeo", agregó.

Su renuncia llega mientras Anthropic prepara su salida a bolsa. Contactadas por la AFP, ninguna de las dos empresas respondió de inmediato.

Sin embargo, Evan Hubinger, responsable de seguridad en Anthropic, le dio la razón a Coxon en X: "Creemos realmente que la IA podría matar a humanos". A título personal, estimó ese riesgo en "más de un 10%" dentro de la próxima década.

Líderes de la industria dicen creer que esta se aproxima a la "automejora recursiva", en la que un modelo podría diseñar a su propio sucesor, completamente por fuera del control humano.

Según Coxon, ninguna empresa debería desarrollar de manera responsable una IA que supere a los humanos sin intervención gubernamental o una desaceleración coordinada.

"En Anthropic comprenden bien lo que está en juego, pero están atrapados en una carrera por llegar primero (...) a pesar del riesgo", afirmó Coxon.

En febrero, Anthropic retiró de su carta de seguridad el compromiso de suspender el desarrollo de sus modelos si no lograba controlar sus riesgos.

A finales de julio, más de mil empleados de la industria, incluido el director ejecutivo de Anthropic, Dario Amodei, pidieron a Washington preparar un mecanismo de frenado.

El domingo, el jefe científico de OpenAI, Jakub Pachocki, escribió que "el momento actual llama por extrema precaución" y coordinación internacional.

A.Ammann--VB