Alerta por la inteligencia artificial: Anthropic y OpenAI piden desacelerar la carrera

Los CEO de Anthropic y OpenAI coincidieron en que la industria debe reducir el ritmo de desarrollo de los modelos más avanzados y abrir sus sistemas a evaluadores externos. Elon Musk respaldó la posición

La carrera por desarrollar sistemas de inteligencia artificial cada vez más poderosos comenzó a originar una señal de alarma entre sus propios protagonistas: los líderes de Anthropic y OpenAI coincidieron en la necesidad de desacelerar el avance de los modelos de frontera y reforzar los controles externos, mientras que Elon Musk respaldó públicamente esa posición.

La discusión cobró fuerza después de la denuncia de Jacob Coxon, un investigador que trabajó en OpenAI y Anthropic y que recientemente abandonó esta última compañía con fuertes cuestionamientos sobre la velocidad y las condiciones en las que avanza el desarrollo de la IA.

Coxon advirtió sobre los riesgos de que un reducido grupo de empresas privadas compita por construir sistemas cada vez más capaces sin que existanmecanismos de supervisión suficientes para controlar una tecnología que, según los propios investigadores del sector, podría alcanzar capacidades superioresa las humanas en numerosas tareas.

En este marco, el CEO de Anthropic, Dario Amodei, publicó un ensayo titulado "We Must Pace the Frontier", en el que sostuvo que la industria debe reducir la velocidad de la carrera por los modelos de frontera para permitir que los mecanismos de seguridad puedan acompañar el aumento de sus capacidades.

Anthropic acompañó la iniciativa con una primera decisión concreta: permitirá que evaluadores externos tengan acceso permanente a sus sistemas, en condiciones similares a las de sus empleados, para verificar el cumplimiento de las medidas de seguridad, reportar incidentes y evaluar el alineamiento de los modelos durante su entrenamiento.

La propuesta recibió el apoyo de Sam Altman, CEO de OpenAI y uno de los principales competidores de Amodei en el desarrollo de los modelos avanzados.

"Estoy de acuerdo con Dario en que necesitamos moderar el avance de la frontera", afirmó Altman, quien además reveló que la cuestión fue uno de los principales temas de las discusiones mantenidas dentro de OpenAI durante las últimas semanas.

Altman también anunció que OpenAI seguirá el camino planteado por Anthropic y dará a evaluadores independientes un nivel de acceso similar al de sus empleados para controlar sus sistemas. "Es una gran idea y nosotros haremos lo mismo", sostuvo.

A la coincidencia entre los responsables de Anthropic y OpenAI se sumó Elon Musk, propietario de SpaceX y fundador de xAI, otra de las compañías que participa de la competencia global por desarrollar modelos más avanzados. "Dario tiene razón", escribió el empresario.

La convergencia entre Amodei, Altman y Musk amplificó así una discusión que hasta ahora estaba concentrada principalmente entre investigadores y especialistas en seguridad de IA: cómo controlar una tecnología cuyo desarrollo se acelera por la propia competencia entre las empresas que buscan liderarla.

El problema radica en que cada compañía tiene incentivos comerciales y tecnológicos para lanzar modelos más capaces antes que sus rivales, mientras que los sistemas de evaluación, regulación y supervisión necesitan tiempo para determinar qué riesgos aparecen a medida que crece su autonomía y capacidad.

La alerta de Coxon y las posteriores posiciones de Amodei, Altman y Musk exponen así una de las principales paradojas de la carrera actual por la inteligencia artificial: las empresas que compiten por llevar la tecnología hasta sus límites empiezan ahora a reconocer públicamente que la velocidad de esa misma competencia puede convertirse en uno de sus mayores peligros.