A sus 37 años ha consagrado su vida en advertirnos del terror de la IA: "Cuando nuestros líderes entiendan finalmente cómo de peligrosa podría ser una superinteligencia, seguro que ponen fin a esta carrera suicida"

Wait 5 sec.

Nate Soares no encaja en el perfil habitual del directivo tecnológico que vende futuro. Su papel público se ha construido alrededor de una alarma muy concreta: la posibilidad de que una IA más capaz que las personas persiga objetivos ajenos a los humanos. Su mensaje busca cortar la inercia.Con 37 años, preside el Machine Intelligence Research Institute, una organización centrada en alineamiento y seguridad. Desde ese lugar ha pasado de escribir para círculos especializados a intervenir en una conversación política más amplia, marcada por laboratorios, reguladores y dinero privado. La advertencia ya salió del nicho.Su frase más dura no se dirige a una aplicación concreta, sino al rumbo general del sector: "Cuando nuestros líderes entiendan finalmente cómo de peligrosa podría ser una superinteligencia, seguro que ponen fin a esta carrera suicida". La cita convierte el retraso político en amenaza.Alineamiento bajo sospechaSoares parte de una idea sencilla de formular y muy difícil de resolver: que un sistema avanzado obedezca en apariencia no garantiza que comparta los fines de sus usuarios. El País sitúa su posición dentro del choque entre catastrofistas y aceleracionistas, una pelea que ya no se limita a foros técnicos. El desacuerdo está en el límite aceptable.La inquietud se agrava cuando los modelos pueden copiarse o operar en más de un entorno. Estudios sobre sistemas que pueden dañar a humanos alimentan el debate sobre barreras reales. La petición de frenazo global muestra que incluso empresas del sector admiten que el ritmo actual puede superar las pruebas disponibles. La teoría empieza a tener ejemplos.El alineamiento, en su versión más dura, no se conforma con que un asistente responda de forma amable. Busca garantías ante sistemas que podrían planear, ocultar pasos intermedios o aprovechar permisos concedidos por usuarios humanos. La cortesía de una respuesta no prueba obediencia real.El choque con los aceleradoresFrente a esa visión, los aceleradores defienden que la IA puede curar enfermedades, mejorar productividad y ayudar a resolver problemas científicos. Soares no niega esos beneficios, pero insiste en que la superinteligencia sería un salto distinto: ya no hablaríamos de una herramienta bajo supervisión constante. El cambio de grado sería cambio de poder.En España, el debate importa porque las normas europeas se están escribiendo mientras la tecnología avanza. La confianza social puede romperse si el público siente que se despliegan sistemas que nadie entiende, una preocupación visible en análisis sobre la confianza en la IA. La regulación llega con presión encima.La crítica a Soares suele apuntar a que una pausa mundial parece inviable. Su respuesta es que también parecían inviables otros acuerdos de seguridad hasta que el coste de ignorarlos se volvió visible. La política cambia cuando cambia el miedo.Soares representa el extremo más severo de una pregunta que ya comparten voces muy distintas: qué condiciones mínimas debe cumplir un sistema antes de recibir más autonomía. Si esa pregunta se aplaza, la respuesta puede llegar cuando el poder ya esté repartido, con gobiernos y empresas obligados a negociar desde una posición más débil, antes de que la dependencia técnica condicione cualquier negociación.