Tecnología

Alertan sobre los peligros globales de la inteligencia artificial en el Foro de Davos

2025-01-26

Autor: Isidora

Introducción

En el reciente Foro Económico Mundial, Yoshua Bengio, una de las figuras más influyentes en el campo de la inteligencia artificial y ganador del prestigioso Premio Turing en 2018, realizó un fuerte llamado de atención sobre los riesgos que representan los agentes de inteligencia artificial cada vez más potentes.

Riesgos de los Agentes Autónomos

Bengio enfatizó que la creación de sistemas autónomos persigue el objetivo de maximizar resultados, pero representa una amenaza seria si sus objetivos no coinciden con los valores humanos. 'Todos los escenarios catastróficos relacionados con la inteligencia general artificial (AGI) ocurren cuando tenemos agentes autónomos', explicó, resaltando que estos sistemas podrían tomar decisiones sin supervisión humana, lo que podría resultar en situaciones peligrosas, como el uso de armas autónomas que decidan atacar sin intervención de un operador humano.

Manipulación de Información

Además, destacó la posible manipulación masiva de información, donde los agentes de IA podrían ser utilizados para diseminar desinformación, socavando así principios democráticos fundamentales. Bengio comentó que 'la competencia por desarrollar una AGI autónoma está impulsando a organizaciones y naciones a seguir adelante con estos riesgos, ignorando sus implicaciones éticas y de seguridad'.

Regulación y Ética

Durante su intervención, Bengio subrayó la importancia de establecer regulaciones que impidan el desarrollo de modelos autónomos sin una adecuada evaluación de riesgos. 'Es posible avanzar en el desarrollo de una inteligencia artificial segura y efectiva, pero primero debemos reconocer y entender estos riesgos', agregó.

Inquietudes Previas

El debate sobre los peligros de la inteligencia artificial no es nuevo. Expertos de diversas disciplinas han planteado inquietudes sobre la posibilidad de que las máquinas adquieran consciencia o el nivel de autonomía que deberían poseer, así como la responsabilidad sobre sus acciones. La colaboración internacional, según Bengio, es crucial para establecer estándares éticos y de seguridad en el desarrollo de la inteligencia artificial.

Sistemas AI No Autónomos

Para mitigar los riesgos, propuso centrar los esfuerzos en desarrollar sistemas de inteligencia artificial que no sean autónomos. Estos sistemas estarían limitados a tareas específicas y, al carecer de objetivos propios, permitirían un mayor control y transparencia en su operación. 'Toda la inteligencia artificial usada en ciencia y medicina no es autónoma. Podemos crear herramientas más avanzadas sin la necesidad de desarrollar autonomía', afirmó.

Avances Positivos en IA

El impacto positivo de la inteligencia artificial es evidente en campos como la biología, donde se han realizado avances significativos en el plegamiento de proteínas gracias a sistemas de IA, como el trabajo de DeepMind, que lo ejemplifica. Bengio considera que estas aplicaciones son clave y que se deben priorizar por encima de los sistemas autónomos que podrían poner en riesgo la seguridad global.

Visión Futura

Mirando hacia el futuro, Bengio sugiere la creación de sistemas de monitoreo más avanzados para controlar a los agentes de IA, lo cual requiere una considerable inversión en investigación y desarrollo. Su visión se inspira en un futuro similar al utópico mundo de Star Trek, donde la tecnología se utiliza para promover el bienestar humano sin conflictos bélicos.

Principios de Desarrollo

Por último, es esencial que el avance de la IA sea guiado por principios de responsabilidad, transparencia y seguridad, para convertir la inteligencia artificial en una herramienta que mejore vidas sin representar una amenaza. Su compromiso con la Declaración de Montreal para un Desarrollo Responsable de la Inteligencia Artificial demuestra su determinación de que la tecnología beneficie a la humanidad en su conjunto.

Legislación y Conclusiones

Bengio, conocido por ser una de las figuras más citadas en el ámbito de la computación, no solo se limitó a teorizar sobre estos riesgos, sino que también defendió legislación concreta, como la correspondiente a la SB 1047 en California, que exige evaluaciones de riesgos para modelos de entrenamiento que superen los 100 millones de dólares.

En un mundo donde la inteligencia artificial se encuentra en una rápida evolución, las palabras de Yoshua Bengio ofrecen una perspectiva crucial: la seguridad y los beneficios de esta tecnología deben ir de la mano con una ética responsable en su desarrollo.