ControlAI es una organización sin fines de lucro dedicada a prevenir el riesgo existencial derivado del desarrollo de la superinteligencia artificial (ASI). Fue fundada en 2023 por Andrea Miotti , quien funge como su directora ejecutiva. [ 3 ] La organización aboga por una prohibición internacional del desarrollo de la superinteligencia artificial (ASI), al tiempo que apoya el desarrollo continuo de aplicaciones de IA más específicas. [ 4 ] Entre los asesores de la organización se encuentra el exsecretario de Defensa del Reino Unido , Des Browne , quien es vicepresidente de la Iniciativa contra la Amenaza Nuclear . [ 5 ]
ControlAI opera en el Reino Unido, Estados Unidos, Canadá y Alemania.
Historia
ControlAI fue fundada por Andrea Miotti en octubre de 2023, en vísperas de la primera Cumbre Mundial de Seguridad de la IA en Bletchley Park . Miotti había sido anteriormente Director de Estrategia y Gobernanza en la empresa de seguridad de la IA Conjecture. [ 5 ] A partir de la segunda mitad de 2025, la organización amplió su alcance político en Estados Unidos, Canadá y Alemania. [ 6 ] En marzo de 2026, Connor Leahy , fundador de EleutherAI y ex director ejecutivo de Conjecture, fue nombrado director ejecutivo para Estados Unidos.
Cumbre de Bletchley Park y Ley de IA de la UE (2023)
Antes de la Cumbre de Seguridad de la IA de noviembre de 2023 , ControlAI hizo campaña a favor de una regulación vinculante de la IA avanzada, argumentando que los compromisos voluntarios que se estaban considerando eran insuficientes dados los riesgos de extinción reconocidos públicamente por los propios líderes de las empresas de IA , incluido el CEO de Anthropic , Dario Amodei , quien estimó una probabilidad de uno entre cuatro de que la IA cause la extinción humana. Miotti fue ampliamente citado al respecto en medios británicos como The Guardian , iNews , el Daily Mail y The Sun. [ 7 ]
Durante las negociaciones finales de la Ley de IA de la UE a finales de 2023, ControlAI hizo campaña contra el lobby de la industria para excluir los modelos base del ámbito de aplicación de la regulación, utilizando furgonetas publicitarias móviles en París y Bruselas y encargando una encuesta a YouGov que reveló que más de dos tercios de los encuestados apoyaban la regulación de los modelos base. [ 8 ] [ 9 ] [ 10 ] El texto final mantuvo reglas específicas para los modelos base por encima de un umbral de cómputo definido.
Campaña de deepfakes (2023-2024)
ControlAI llevó a cabo una de las campañas de la sociedad civil más visibles del Reino Unido contra los deepfakes generados por IA , creando un grupo multipartidista de más de 60 legisladores británicos que respaldaron públicamente la prohibición de los deepfakes en toda la cadena de suministro. [ 11 ] La campaña fue mencionada explícitamente en una moción del Parlamento escocés en febrero de 2024, [ 12 ] y fue cubierta por The Times [ 13 ] y el Frankfurter Allgemeine Zeitung. [ 14 ] En abril de 2024, el Gobierno del Reino Unido anunció una propuesta de legislación que penaliza la creación de deepfakes sexualmente explícitos. [ 15 ] ControlAI también es miembro de la coalición internacional Campaña para Prohibir los Deepfakes.
"Un camino estrecho" (2024)
En octubre de 2024, Miotti y otros publicaron A Narrow Path , un plan político que propone un conjunto gradual de medidas nacionales e internacionales para prevenir el desarrollo de IA superinteligente, al tiempo que se preserva espacio para aplicaciones beneficiosas. [ 16 ] [ 17 ] [ 18 ]
Campaña parlamentaria en el Reino Unido (2024–)
Desde finales de 2024, ControlAI llevó a cabo una campaña informativa sostenida con miembros del Parlamento del Reino Unido; a principios de 2026, la organización informó haber informado a más de 150 parlamentarios de distintos partidos y a la oficina del Primer Ministro del Reino Unido. [ 6 ] Este trabajo se realizó mientras la política de IA del Reino Unido era criticada por retrasos y en medio de peticiones para que la Secretaria de Estado de Ciencia, Innovación y Tecnología , Liz Kendall , ejerciera una supervisión más rigurosa. [ 19 ] [ 20 ] En diciembre de 2025, más de 100 de estos parlamentarios habían firmado la declaración multipartidista de ControlAI que pedía una regulación vinculante de los sistemas de IA más potentes. [ 21 ] [ 22 ] La actividad parlamentaria posterior fue más allá, adoptando el llamamiento más amplio de ControlAI a favor de una prohibición internacional del desarrollo de la superinteligencia. En enero de 2026, la Cámara de los Lores celebró dos debates sobre el riesgo de la IA avanzada, en los que Lord Hunt de Kings Heath (Laborista) preguntó al Gobierno sobre una moratoria internacional sobre la superinteligencia y Lord Fairfax de Cameron (Conservador) abordó los riesgos de los sistemas de IA autónomos; ambos lores agradecieron públicamente a ControlAI su apoyo en la preparación de sus discursos. [ 23 ] El diputado laborista Alex Sobel y Lord Hunt también publicaron artículos de opinión en los que respaldaban una prohibición internacional del desarrollo de la superinteligencia. [ 24 ] [ 25 ] ControlAI ha presentado un borrador de proyecto de ley de IA que prohíbe la superinteligencia en el número 10 de Downing Street [ 6 ] y en marzo de 2026 asesoró y apoyó una enmienda al proyecto de ley de Ciberseguridad y Resiliencia del Reino Unido que otorgaría al gobierno poderes para cerrar centros de datos que albergan sistemas de IA que representan amenazas críticas para la seguridad nacional. [ 26 ] [ 27 ]
Estados Unidos, Canadá y Alemania (2025–)
ControlAI has extended its policy outreach to multiple jurisdictions. In the United States, according to ControlAI, by 2026 it had briefed more than 100 Congressional offices, including 18 senators and House members.[28] In Canada, ControlAI's Canadian representative Samuel Buteau briefed lawmakers and testified to the Standing Senate Committee on Human Rights,[29][30][31] while CEO Andrea Miotti testified to the House of Commons Standing Committee on Access to Information, Privacy and Ethics.[32] By early 2026, the organisation reported having briefed more than 200 lawmakers across the United Kingdom, United States, Canada and Germany.[6]
The organisation has monitored and warned against the international race for artificial general intelligence, particularly between the United States and China. ControlAI has claimed potential risks associated with President Trump's Genesis Mission, an executive initiative aimed at deploying AI across the U.S. scientific ecosystem. The organisation warned that the mission could fail "if it becomes a mere subsidy for private companies building superintelligent AI that threatens national and global security".[1]
Reception
ControlAI's work has been covered by outlets including The Guardian,[21]Time,[10]Nature,[33]The Times,[34]Euronews,[8]The Washington Post[35] and Channel 4 News.[36] Miotti has written op-eds for TIME,[37] and The Spectator,[38] and has given evidence to both the UK Parliament[39] and the Canadian House of Commons.[32]
La afirmación central de la organización de que la IA superinteligente supone un riesgo de extinción es compartida por investigadores como el premio Nobel Geoffrey Hinton y Yoshua Bengio , así como por los directores ejecutivos de OpenAI , Anthropic , Google DeepMind y xAI , muchos de los cuales firmaron la Declaración de 2023 sobre el Riesgo de la IA . Otros, como Gary Marcus , rebaten esta afirmación, argumentando que los sistemas de IA actuales no se dirigen claramente hacia la superinteligencia. [ 4 ] [ 33 ]
Véase también
- seguridad de la IA
- alineación de IA
- Cumbre de Seguridad de la IA 2023
- Centro para la Seguridad de la IA
- Instituto del Futuro de la Vida
- Instituto de Investigación de Inteligencia Artificial
- Suspender los experimentos gigantescos de IA: una carta abierta
Referencias
- 1 2 Gibney, Elizabeth ; Witze, Alexandra; Ahart, Jenna (26 de noviembre de 2025). "La 'Misión Génesis' de IA de Trump: ¿cuáles son los riesgos y las oportunidades?" . Nature . Recuperado el 12 de mayo de 2026 .
- ↑ Gibney, Elizabeth (1 de diciembre de 2025). «China quiere liderar el mundo en la regulación de la IA: ¿funcionará el plan?» . Nature . págs. 503–505 . doi : 10.1038/d41586-025-03902-y . Consultado el 12 de mayo de 2026 .
- ↑ Down, Aisha (25 de octubre de 2025). "Los modelos de IA podrían estar desarrollando su propio 'instinto de supervivencia', según los investigadores" . The Guardian . ISSN 0261-3077 . Consultado el 23 de mayo de 2026 .
- 1 2 "¿Será la "superinteligencia" lo último que inventen los humanos?" . BBC Arabic . 15 de noviembre de 2025 . Consultado el 12 de mayo de 2026 .
- 1 2 "Sobre nosotros | ControlAI" . ControlAI . Consultado el 22 de mayo de 2026 .
- 1 2 3 4 "Informe de impacto 2025 | ControlAI" . ControlAI . Consultado el 23 de mayo de 2026 .
- ↑ La cobertura y los comentarios de este período incluyeron:
- 1 2 "Los expertos instan a los gobiernos de la UE a regular la IA en lugar de a las empresas" . Euronews . Archivado del original el 9 de marzo de 2026. Consultado el 23 de mayo de 2026 .
- ↑ «Exfuncionario francés aboga por unas normas más flexibles para la IA tras unirse a una startup» . Bloomberg News . Archivado del original el 9 de septiembre de 2025. Consultado el 23 de mayo de 2026 .
- 1 2 Perrigo, Billy. "Exclusiva: los británicos quieren prohibir la IA 'más inteligente que la humana'" . Time . Archivado del original el 24 de julio de 2025. Recuperado el 23 de mayo de 2026 .
- ↑ "Declaración de la campaña sobre deepfakes | ControlAI" . ControlAI . Consultado el 23 de mayo de 2026 .
- ↑ "Campaña ControlAI, Parlamento escocés" . www.parliament.scot . Consultado el 23 de mayo de 2026 .
- ↑ Blakely, Rhys (1 de marzo de 2024). "¿Qué tan fácil es crear un audio deepfake? Solo necesité seis minutos en línea" . The Times . Consultado el 23 de mayo de 2026 .
- ↑ "Deepfakes: So gefährlich ist KI in den sozialen Medien" . FAZ.NET (en alemán). 4 de febrero de 2024 . Consultado el 23 de mayo de 2026 .
- ↑ "El gobierno toma medidas enérgicas contra la creación de 'deepfakes'" . GOV.UK. Consultado el 23 de mayo de 2026 .
- ↑ "Un camino estrecho" . www.narrowpath.co . Consultado el 22 de mayo de 2026 .
- ↑ Wood, David (25 de octubre de 2024). "Un camino estrecho hacia un buen futuro con la IA, con Andrea Miotti" . Tremr . Consultado el 12 de mayo de 2026 .
- ↑ Barten, Otto (15 de noviembre de 2024). "Hay una solución al problema del riesgo existencial de la IA" . Time . Consultado el 12 de mayo de 2026 .
- ↑ Koopman, Saskia (8 de diciembre de 2025). "Los parlamentarios presionan para que se implementen normas más estrictas sobre IA mientras el Reino Unido se queda atrás" . City AM. Consultado el 12 de mayo de 2026 .
- ↑ Koopman, Saskia (5 de septiembre de 2025). "Kendall se enfrenta a una dura prueba para rescatar la fallida política de IA del Reino Unido" . City AM . Consultado el 12 de mayo de 2026 .
- 1 2 Booth, Robert (8 de diciembre de 2025). "Decenas de parlamentarios británicos se suman al llamamiento para regular los sistemas de IA más potentes" . The Guardian . ISSN 0261-3077 . Consultado el 23 de mayo de 2026 .
- ↑ "Más de 100 legisladores británicos piden regulación de la IA para prevenir el riesgo de extinción" . MLex .
- ↑
- ↑ Diputado, Alex Sobel (15 de diciembre de 2025) ."La regulación de la superinteligencia artificial es lo que les debemos a los votantes de esta generación y a las venideras"." . LabourList . Consultado el 23 de mayo de 2026 .
- ↑ Lord Hunt de Kings Heath (17 de febrero de 2026). "Por qué necesitamos una moratoria en la investigación sobre superinteligencia" . www.transformernews.ai . Consultado el 23 de mayo de 2026 .
- ↑ "Enmienda NC12 al proyecto de ley de ciberseguridad y resiliencia (redes y sistemas de información) - Proyectos de ley parlamentarios - Parlamento del Reino Unido" . bills.parliament.uk . 25 de marzo de 2026. Consultado el 23 de mayo de 2026 .
- ↑ Titcomb, James (16 de mayo de 2026). "Los parlamentarios exigen un 'interruptor de apagado' de la IA para defenderse de la 'catástrofe'"" . The Daily Telegraph . Consultado el 23 de mayo de 2026 .
- ↑ "Nuestro trabajo en EE. UU. | ControlAI" . ControlAI . Consultado el 23 de mayo de 2026 .
- ↑ "Comité Permanente del Senado sobre Derechos Humanos, 45.º Parlamento, 1.ª Sesión, Reunión 11" . Senado de Canadá . 23 de febrero de 2026. Consultado el 23 de mayo de 2026 .
- ↑ Nowak, Peter (19 de marzo de 2026). "Los defensores anti-IA y las compañías energéticas encabezan los informes de lobby de febrero" . No pases por la casilla de salida . Recuperado el 12 de mayo de 2026 .
- ↑ Djuric, Mickey; Lum, Zi-Ann (20 de octubre de 2025). "Conservadores: Caucus vs. base" . Politico . Consultado el 12 de mayo de 2026 .
- 1 2 Miotti, Andrea (2026). "Comité Permanente de la Cámara de los Comunes sobre Acceso a la Información, Privacidad y Ética (ETHI), Reunión N.° 24" . ParlVu . Parlamento de Canadá . Recuperado el 23 de mayo de 2026 .
- 1 2 Gibney, Elizabeth (21 de abril de 2026). "Las advertencias sobre el fin de la IA son cada vez más fuertes. ¿Son realistas?" . Nature . 652 (8111): 848– 850. doi : 10.1038/d41586-026-01257-6 . ISSN 1476-4687 .
- ↑ "«El mundo está en peligro»: Investigadores de IA renuncian con advertencias públicas . The Times .
- ↑ Tiku, Nitasha (18 de abril de 2026). "Dentro de un creciente movimiento que advierte que la IA podría volverse contra la humanidad" . The Washington Post . ISSN 0190-8286 . Recuperado el 23 de mayo de 2026 .
- ↑ "El desempleo en el Reino Unido se dispara: ¿la IA ya nos está quitando el trabajo?" . Channel 4 News . 17 de febrero de 2026 . Consultado el 23 de mayo de 2026 – vía YouTube.
- ↑ Miotti, Andrea. "Necesitamos un movimiento global para prohibir la IA superinteligente" . TIME . Archivado del original el 7 de noviembre de 2025. Consultado el 23 de mayo de 2026 .
- ↑ Miotti, Andrea (6 de mayo de 2026). "Estamos más cerca de la extinción de la IA de lo que pensamos" . The Spectator . Consultado el 23 de mayo de 2026 .
- ↑ Parlamento del Reino Unido. "Pruebas escritas presentadas por Andrea Miotti y Steven Adler (RAI0031)" . Consultado el 23 de mayo de 2026 .
Enlaces externos
- Sitio web oficial
- organizaciones de inteligencia artificial
- Organizaciones sin ánimo de lucro con sede en el Reino Unido.
- Organizaciones sin fines de lucro con sede en los Estados Unidos
- seguridad de la IA
- Organizaciones de riesgo existencial
- Riesgo existencial derivado de la inteligencia artificial
- La industria de la inteligencia artificial en Estados Unidos
- Regulación de la inteligencia artificial