¿Necesitamos una agencia que supervise la inteligencia artificial?

(Por José Luis Verdegay Galdeano, Universidad de Granada) A menudo nos encontramos anuncios de productos con el sello “con inteligencia artificial”. Pero muy pocas veces, por no decir nunca, se informa al usuario de más detalles. ¿Quién nos garantiza que, efectivamente, ese producto funciona en base a inteligencia artificial (IA)? ¿Quién certifica que las respuestas que nos ofrece son las correctas? ¿A qué código ético obedece? Sin saber nada al respecto, cuando por alguna causa ese producto no funciona como esperábamos, es normal concluir que la IA no es fiable y mucho menos los algoritmos que emplea.

Pero ¿sabemos si el producto al que nos referimos funciona en base a un algoritmo? ¿Las soluciones que proporciona son siempre malas o solo lo son dependiendo del usuario? ¿El código ético de quien diseñó ese producto coincide con el nuestro? Y, a propósito: ¿quién define lo que es un comportamiento ético? ¿Cómo se mide la ética?

¿Qué es axactamente un algoritmo?

Un algoritmo es una secuencia ordenada de pasos, exentos de ambigüedad, que cuando se lleva a cabo con fidelidad en un tiempo finito da como resultado la solución del problema planteado, habiendo realizando, por tanto, la tarea para la que se diseñó. Así, para que un algoritmo sea correcto necesita cumplir lo siguiente:

  • debe terminar siempre tras un número finito de etapas;

  • las acciones que ha de llevar a cabo en cada etapa deben estar rigurosamente especificadas, sin ambigüedades;

  • los valores con los que comienza a funcionar se han de tomar de conjuntos preespecificados;

  • el resultado que proporcione siempre dependerá de los datos de entrada;

  • todas las operaciones que haya que realizar en el algoritmo deben ser lo suficientemente básicas como para que se hagan exactamente y en un periodo finito de tiempo.

Cuando no se da alguna de estas propiedades, no tenemos un algoritmo.

Los algoritmos, por tanto, no son como las recetas de cocina, que pueden tener reglas imprecisas, y como consecuencia producir resultados tan distintos como imprevisibles. Son procesos iterativos que generan una sucesión de puntos, conforme a un conjunto dado de instrucciones y un criterio de parada. Como tales, no están sujetos a restricciones tecnológicas de tipo alguno, es decir, son absolutamente independientes del equipamiento tecnológico disponible para resolver el problema que afronten. Es el programa en el que se escriba el algoritmo, el software, el que lo ejecuta en un computador.

Cuando ese programa y el algoritmo en el que se basa están diseñados con técnicas y metodologías de IA, y por tanto basadas en el comportamiento de las personas, a veces pueden surgir problemas a la hora de conocer y aceptar las decisiones que toma dicho programa.

Podemos sentirnos amenazados por creernos que esas máquinas realizan nuestros trabajos mejor que nosotros o porque nadie sepa explicar el comportamiento que tienen cuando actúan saliéndose de lo previsto, produciendo sesgos indeseables, soluciones no sostenibles o, en definitiva, porque consideremos que no tienen un comportamiento ético.

Pero esa es la versión que se ve desde el lado del usuario, es decir, de quien observa cómo se comporta ese sistema. Porque desde el lado del diseñador, a veces los resultados se ajustan exactamente a lo que conscientemente se había previsto en el algoritmo de origen y el correspondiente software que llega a los usuarios.

Contradicciones éticas

El rango de posibilidades es más que amplio. Van desde comportamientos indebidos a causa de errores fortuitos, indeseables pero inevitables, y con los que en todo caso hay que contar, hasta la comercialización totalmente interesada de sistemas basados en IA en los que su buen uso no está asegurado en ningún sentido o, incluso peor, no están basados en IA.

En cualquier caso, y desde un punto de vista muy general, es obvio que el nivel ético de un cierto software basado en IA es contexto-dependiente. Mientras que en cierto ámbito una actuación puede tacharse de falta de ética, en otros puede entenderse como idónea. Esto da lugar a situaciones contradictorias difíciles de comparar porque ni disponemos de herramientas que nos permitan valorar el comportamiento ético de un sistema basado en IA, ni de legislación que lo regule.

Por tanto, y aunque solo fuera por estas razones que brevemente se han descrito, era imprescindible incluir la creación de una Agencia Española de Supervisión de Inteligencia Artificial (AESIA) en la disposición adicional centésima trigésima de la Ley 22/2021, de 28 de diciembre de Presupuestos Generales del Estado para el año 2022.

Según se plantea, la AESIA actuará con plena independencia orgánica y funcional de las administraciones públicas, de forma objetiva, transparente e imparcial. Llevará a cabo medidas destinadas a la minimización de riesgos significativos sobre la seguridad y salud de las personas, y sobre sus derechos fundamentales que puedan derivarse del uso de sistemas de IA.

Así mismo, la agencia se encargará del desarrollo, supervisión y seguimiento de los proyectos enmarcados dentro de la Estrategia Nacional de Inteligencia Artificial, además de aquellos impulsados por la Unión Europea, en particular los relativos al desarrollo normativo sobre la IA y sus posibles usos.

¿Dónde se ubicará?

De cara a seleccionar la ubicación de la agencia, el Real Decreto 209/2022, del 22 de marzo establece el procedimiento a través del cual se determinará el término municipal en el que se ubicará su sede física.

La agencia funcionará como una autoridad pública independiente encargada de garantizar a la sociedad, desde la perspectiva de servicio público, la calidad, seguridad, eficacia y correcta información de los sistemas basados en IA, desde su investigación hasta su utilización. Para ello dispondrá de mecanismos objetivos de evaluación, certificación y acreditación de los sistemas basados en IA, cuya ausencia actual planteábamos al comienzo de este artículo.

La elección de la sede física de la AESIA corresponderá a una Comisión consultiva, por cierto, ya creada.

Sea cual sea el municipio en el que se instale, su funcionamiento tendrá que ajustarse estrictamente a todos y cada uno de los anteriores principios. Por tanto, no parece oportuno que las diferentes candidaturas que se postulen para albergar su sede vengan avaladas por empresas del sector, ya sean nacionales o internacionales. La intervención directa o indirecta de estas compañías podría poner en tela de juicio la necesaria independencia de la agencia.

Cosa distinta es que el sector empresarial, que desempeña un papel clave en todo lo concerniente al desarrollo de la IA, avale y respalde la iniciativa gubernamental acerca de la creación de la AESIA, pero sin apostar por una ubicación concreta.

Pero la AESIA no puede quedarse solo en una agencia nacional que actúe de manera aislada. Deberá alinearse con la estructura orgánica que la Unión Europea diseñe, particularmente con la futura Junta Europea de Inteligencia Artificial.

La agencia también deberá ajustarse a la legislación europea. Ya hay un borrador de reglamento del Parlamento y del Consejo Europeo que establece normas armonizadas en materia de IA. La conocida como Ley de la Inteligencia Artificial, persigue definir una métrica para evaluar el impacto social de los algoritmos en el sector industrial, exigir la transparencia algorítmica, su explicabilidad, y acreditar su calidad ética.

Como conclusión, respondiendo a la pregunta que planteábamos al principio, la AESIA no solo es imprescindible sino que necesitamos que empiece a funcionar tan pronto como sea posible de manera independiente, con credibilidad y con medios suficientes. Pero nada de ello será eficaz sin una legislación que regule la producción, uso y funcionamiento de los sistemas basados en IA; que asegure y proteja a las personas y que esté tan consensuada en el ámbito europeo como sea posible.

José Luis Verdegay Galdeano, Catedrático de Ciencia de la Computación e Inteligencia Artificial, Universidad de Granada

Este artículo fue publicado originalmente en The Conversation. Lea el original.

The Conversation

El stand de Cataluña en la feria internacional B-Travel 2025 gira en torno a la distinción como Región Mundial de la Gastronomía 2025

El stand de Cataluña en la feria internacional B-Travel 2025 gira en torno a la distinción de nuestro país como Región Mundial de la Gastronomía 2025. La directora general de Turismo, Cristina Lagé, ha inaugurado hoy este salón de experiencias turísticas que tiene lugar hasta el domingo 30 de marzo en el recinto Montjuïc de Fira de Barcelona. En su inauguración le han acompañado el director general de Turespaña, Miguel Ángel Sanz; el director general de Fira de Barcelona, ​​Constantí Serrallonga; el presidente de B-Travel, Martí Sarrate; la directora del salón, Marta Serra; y la directora de la Agencia Catalana de Turismo, Arantxa Calvera.

Empleados de AstraZeneca reforestan bosques en Sant Martí de Tous, Barcelona

AstraZeneca y Bosquea han celebrado la jornada de voluntariado 'hAZiendo horizonte juntos', en la que ha reunido un medio centenario de trabajadores de la compañía farmacéutica para contribuir a la regeneración de bosques en Sant Martí de Tous, Barcelona. Esta actividad marca un paso crucial en su proyecto de plantación de especies autóctonas en la zona, con el que esperan alcanzar un total de 2.200 árboles y compensar 190 toneladas de CO 2 a lo largo de los próximos 50 años.

El 67% de la ciudadanía española cree que un liderazgo transformador puede cambiar el sistema

La ciudadanía sigue demandando un cambio profundo en el sistema económico y social. El III Estudio ‘Propósito y liderazgo transformador’, elaborado por CANVAS Estrategias Sostenibles en colaboración con Punto de Fuga y la Universidad de Málaga, confirma que el 76,5% de la población considera necesaria una transformación del modelo actual. Sin embargo, la valoración del sistema muestra un ligero descenso en la opinión crítica con respecto a la consulta de años anteriores, con una puntuación media de 4,2 sobre 10. Este año, el estudio pone el foco en el papel del liderazgo en la regeneración del sistema y revela que el 67,1% de la ciudadanía cree que las empresas que adopten un liderazgo transformador pueden contribuir a cambiar el sistema socioeconómico para que sea más beneficioso para las personas y el planeta.

Alemanes, franceses, ingleses e italianos prefieren Barcelona (en cambio los portugueses eligen Madrid)

eBooking.com, la compañía española referente en ofrecer reservas de alojamientos turísticos en línea, ha analizado cuáles son los diez destinos que reciben más pernoctaciones por parte de las nacionalidades europeas que mayor número de turistas envían a España -Alemania, Francia, Inglaterra, Italia y Portugal-. Los datos extraídos reflejan divergencias relevantes entre nacionalidades a la hora de elegir el destino de las vacaciones en España.

Cataluña gestiona 55 planes de sostenibilidad turística con más de 200 millones de euros de inversión en todo el territorio

El consejero de Empresa y Trabajo, Miquel Sàmper, y el ministro de Industria y Turismo, Jordi Hereu, han abierto hoy una jornada interna para explicar el grado de ejecución de los 55 planes de sostenibilidad turística en destino que actualmente están en marcha en las comarcas catalanas. La sesión, celebrada en La Pedrera, también contó con la participación la directora general de Turismo de la Generalidad de Cataluña, Cristina Lagé, así como de la secretaria de Estado de Turismo, Rosario Sánchez, y de la directora general de Políticas Turísticas, Ana Muñoz, por parte del Ministerio.

Madrid se consolida como hub global de la industria del videojuego tras su gira por EE.UU

Madrid in Game, iniciativa del Ayuntamiento de Madrid para impulsar la industria del videojuego y la gamificación, ha fortalecido su proyección internacional con su participación en dos de los eventos más destacados del sector a nivel internacional: la Game Developers Conference (GDC) en San Francisco y la eMerge Americas en Miami. Esta nueva gira por Norteamérica subraya de nuevo el compromiso de Madrid por posicionarse como un referente global en la industria del videojuego, atrayendo inversión, invitando a compañías internacionales a establecerse en la capital y potenciando el talento de los jóvenes madrileños.