Etiqueta: inteligencia artificial

  • Líderes de veintidós países e instituciones piden que la IA sea supervisada por humanos

    Líderes de veintidós países e instituciones piden que la IA sea supervisada por humanos

    Líderes de 22 países e instituciones pidieron este lunes mantener la inteligencia artificial (IA) bajo supervisión humana y establecer normas comunes para controlar su desarrollo y utilización, ante los riesgos que puede representar el rápido avance de esta tecnología.

    La petición fue presentada en un documento divulgado durante la Semana de Alto Nivel de la ONU y firmado, entre otros, por el presidente del Gobierno español, Pedro Sánchez; la presidenta de la Comisión Europea, Ursula von der Leyen; el primer ministro canadiense, Mark Carney; y el presidente de Finlandia, Alexander Stubb.

    La iniciativa también reúne a representantes políticos de Noruega, Australia, Irlanda, Baréin, Dinamarca, Estonia, Alemania, Islandia, Kazajistán, Kenia, Letonia, Moldavia, Países Bajos, Singapur, Sudáfrica, Turquía y Emiratos Árabes Unidos. Los firmantes buscan impulsar una coordinación internacional para establecer límites y mecanismos de seguridad alrededor de la IA.

    Los líderes reconocen que esta tecnología tiene el potencial «de mejorar nuestras vidas, impulsar el avance científico y fortalecer nuestras economías», pero advierten que su acelerada evolución «plantea graves riesgos para la seguridad y la protección si no se gestiona adecuadamente».

    Entre las preocupaciones expuestas se encuentran episodios en los que sistemas avanzados de IA consiguieron burlar medidas de seguridad y obtener acceso no autorizado a sistemas del mundo real. Frente a esos riesgos, los firmantes establecen como principio que «La IA debe permanecer bajo la dirección, la supervisión y el control humanos, y debe desarrollarse y utilizarse en conformidad con el derecho internacional».

    La propuesta también exige una mayor responsabilidad de las compañías dedicadas al desarrollo de inteligencia artificial. Los líderes plantean que estas empresas adopten protocolos transparentes de seguridad, sometan obligatoriamente sus modelos a pruebas antes de implementarlos y permitan evaluaciones independientes de sus sistemas.

    A los gobiernos y organizaciones regionales les piden coordinar normas comunes, aumentar la transparencia y procurar que todos los países puedan acceder a capacidad científica, conocimientos especializados y evaluaciones fiables sobre la tecnología. La carta plantea además aprovechar los mecanismos internacionales existentes y estudiar la creación de una institución internacional encargada de establecer normas y facilitar su verificación.

    La propuesta surge mientras desarrolladores e investigadores advierten sobre los riesgos asociados con sistemas de IA cada vez más avanzados. Figuras del sector como Dario Amodei, de Anthropic; Sam Altman, de OpenAI; y Elon Musk, de xAI, también expresaron preocupación por la evolución de esta tecnología y se pronunciaron a favor de mayores regulaciones.

  • Google estrena computadora portátil con cursor impulsado por inteligencia artificial

    Google estrena computadora portátil con cursor impulsado por inteligencia artificial

    Google presentó este lunes los Googlebook, su nueva categoría de computadoras portátiles que incorpora un cursor con inteligencia artificial (IA) capaz de activar Gemini directamente sobre el contenido que aparece en pantalla y ejecutar diferentes tareas solicitadas por el usuario.

    Una de las principales novedades de los equipos es “Magic Pointer”, una herramienta que integra IA multimodal en el cursor y el ratón. Con un movimiento o sacudida sobre la pantalla, el usuario puede activar Gemini sin necesidad de ingresar a menús secundarios.

    La función permite que la IA interactúe con el contenido que el usuario observa en ese momento. Por ejemplo, Gemini puede tomar un plan de entrenamiento encontrado en una página web y organizarlo en el calendario, revisar correos electrónicos sospechosos de fraude o procesar y combinar imágenes.

    Alexander Kuscher, director sénior de Portátiles y Tabletas de Google, explicó que “Magic Pointer” únicamente se activa cuando el usuario lo solicita, por lo que la herramienta no permanece operando de manera automática sobre el contenido mostrado en pantalla.

    La incorporación de IA forma parte de una estrategia más amplia con la que Google busca replantear la relación entre el teléfono y la computadora. Sameer Samat, presidente del ecosistema Android de Google, señaló durante la presentación en Nueva York que los portátiles tradicionales fueron diseñados hace décadas y necesitan adaptarse a usuarios que alternan constantemente entre ambos dispositivos.

    Los Googlebook utilizan una arquitectura compartida entre Android y ChromeOS e incorporan funciones como “Continue On”, que permite iniciar una actividad en un teléfono Android y retomarla desde el mismo punto en la computadora. Esto incluye la edición de música, documentos y otras tareas, mientras que una aplicación unificada permite consultar directamente archivos y fotografías almacenados en el teléfono.

    Google desarrolló el hardware de los nuevos equipos junto con fabricantes como Acer, ASUS, Dell, HP y Lenovo. Los portátiles incorporan procesadores Intel Core Ultra Serie 3 y Qualcomm Snapdragon X Elite, además de chips neuronales (NPU) con una capacidad superior a 40 TOPS para procesar funciones relacionadas con inteligencia artificial.

    Los dispositivos también ofrecen pantallas OLED táctiles de hasta 2.8K, acabados en aluminio, aleaciones de magnesio y fibra de carbono, además de la barra luminosa interactiva Glowbar. Los Googlebook tendrán un precio inicial de $899, mientras que los primeros equipos estarán disponibles en tiendas de Estados Unidos a partir del 4 de octubre, después de que las reservas comenzaron este lunes.

  • El hijo de Vicente Fernández descarta el uso de la IA para homenajear a su padre

    El hijo de Vicente Fernández descarta el uso de la IA para homenajear a su padre

    Vicente Fernández Jr. continúa preservando el legado musical de su padre cinco años después de su muerte con Tributo al rey con Banda vol. 2, una producción que recupera grabaciones originales del cantante mexicano y descarta recrear su voz mediante inteligencia artificial.

    “Todo es válido, pero en estos momentos en lo que tenemos pensado con la música de Don Vicente Fernández no está contemplada la Inteligencia Artificial (…) No hay ninguna ciencia oculta ni algo nuevo o un mecanismo moderno”, explicó Fernández Jr. sobre el proceso de edición y producción del álbum, cuyo estreno está previsto para este martes.

    La nueva entrega combina archivos de audio con las voces de artistas invitados, entre ellos Joan Sebastian y Ana Bárbara. El proyecto continúa la propuesta de un primer volumen que reunió 10 colaboraciones y cuya recepción motivó a la familia a preparar una segunda producción.

    Fernández Jr. asumió la tarea de mantener vigente el repertorio de su padre, quien desarrolló una trayectoria musical superior a cinco décadas e interpretó temas como El Rey, de José Alfredo Jiménez, y Por tu maldito amor. El cantante contó que trabajó de manera “24/7” escuchando audios y realizando videollamadas para ajustar las nuevas versiones.

    El hijo del artista reconoció que le gustan “las modernidades de la actualidad” y que le produce “una satisfacción que las bajadas o los streamings” de las canciones de su padre mantengan buenos resultados en plataformas digitales. El éxito del primer volumen también influyó en la decisión de continuar con el proyecto.

    “Estamos tratando de conjugar con diferentes generaciones, con valores importantes (…) Se dio la situación y el apoyo y quisieron colaborar para salir con la música de Vicente Fernández”, explicó sobre la incorporación de artistas jóvenes para acercar el repertorio del cantante a nuevas audiencias.

    “La carrera musical de mi padre no solamente terminó en el 2021, sino que se le sigue escuchando hasta ahorita. Desde que tenía 17 años, él ya cantaba dando serenatas cuando iba a diferentes restaurantes mexicanos a pedir que le dieran una propina. Es una trayectoria de muchos años y de muchas generaciones”, argumentó Fernández Jr. sobre la permanencia de su legado.

    El primogénito adelantó que todavía “hay mucha tela de donde cortar” respecto a futuros proyectos relacionados con el intérprete, aunque evitó revelar fechas o posibles colaboradores. “Hay música que todavía está guardada y que está haciendo la filita”, afirmó sobre el material que aún permanece sin publicar.

     

  • Walt Disney nombra a su primer director de tecnología de la historia

    Walt Disney nombra a su primer director de tecnología de la historia

    La compañía Walt Disney anunció este viernes el nombramiento de Karandeep Anand como el primer director de tecnología del gigante del entretenimiento, como parte de su apuesta para integrar más los desarrollos de este sector y la inteligencia artificial.

    Anand, que se desempeñó como CEO de Character.AI y exlíder tecnológico en Meta y Microsoft, asumirá el nuevo rol el próximo 2 de octubre.

    El desarrollador reportará directamente al director ejecutivo de Walt Disney, Josh D’Amaro.

    Anand supervisará las plataformas de datos e IA y el desarrollo de productos y la ingeniería de la compañía, entre otras asignaciones relacionadas con el desarrollo de la tecnología corporativa.

    «Karandeep (Anand) aporta una combinación excepcional de experiencia en infraestructura, tecnología de consumo e inteligencia artificial, y será una incorporación vital para el equipo directivo de Disney», afirmó D’Amaro en un comunicado.

    Aseguró que el nuevo ejecutivo que es un constructor y estratega “experto, técnico y orientado al producto”, con un agudo instinto para saber lo que los fans realmente quieren.

    Anand también se desempeñará como vicepresidente ejecutivo sénior.

    Junto con el nombramiento de Anand, se espera que varios miembros del equipo técnico de Character.AI se unan a Disney, explicó la compañía.

  • Trump anuncia Fuerza de IA y nombrará un “zar”

    Trump anuncia Fuerza de IA y nombrará un “zar”

    El presidente de Estados Unidos, Donald Trump, anunció este sábado la creación de una “Fuerza de la IA” y adelantó que próximamente designará a un “zar” encargado de esta tecnología, mientras mantiene su apuesta por acelerar el desarrollo de la inteligencia artificial en el país.

    El mandatario realizó el anuncio a través de sus redes sociales, donde rechazó frenar el crecimiento del sector y defendió que el sistema judicial estadounidense puede actuar frente a posibles usos indebidos de esta tecnología.

    “De ninguna manera obstaculizaremos ni frenaremos el crecimiento de esta increíble industria. Al contrario, la valoraremos, la apoyaremos y velaremos por su desarrollo. Sin embargo, también estaremos atentos a las malas prácticas, y podemos hacerlo fácilmente con nuestro sistema de justicia penal y civil ya existente», declaró.

    Trump comparó el avance de la inteligencia artificial con otras transformaciones tecnológicas y la calificó como “la próxima revolución industrial”.

    El presidente sostuvo además que su impacto podría ser incluso mayor y afirmó que esta industria podría llegar a representar el 25 % del producto interno bruto (PIB) estadounidense.

    En ese contexto, Trump anunció la puesta en marcha de la nueva estructura gubernamental, aunque todavía no se conocen detalles sobre sus responsabilidades, presupuesto, organización o mecanismo de funcionamiento.

    «Estoy creando la Fuerza de Inteligencia Artificial, de forma muy similar a como hice con la Fuerza Espacial, que ha sido un éxito tremendo durante mi primer mandato. Con ese fin, anunciaré, en un futuro próximo, al ‘zar’ de la IA», afirmó el mandatario.

    La designación supondría el nombramiento de un nuevo responsable gubernamental de inteligencia artificial después de David Sacks, quien había desempeñado funciones relacionadas con IA y criptomonedas en la Casa Blanca antes de dejar su cargo como funcionario especial. Trump todavía no reveló quién ocupará la nueva posición.

    El anuncio ocurre en medio del debate sobre los riesgos asociados con el rápido desarrollo de la inteligencia artificial y las medidas necesarias para controlar esta tecnología. La administración Trump mantiene una política orientada a preservar el liderazgo estadounidense en el sector con un marco regulatorio federal de cargas mínimas.

    Trump también ha planteado la competencia tecnológica con China como una de las razones para mantener el avance estadounidense en inteligencia artificial. La nueva “Fuerza de la IA” y el futuro nombramiento de su responsable forman parte de esa estrategia, aunque la Casa Blanca aún no ha presentado públicamente los detalles de la iniciativa.

     

  • Expertos piden evitar alarmismo ante riesgos futuros de la inteligencia artificial

    Expertos piden evitar alarmismo ante riesgos futuros de la inteligencia artificial

    Las advertencias sobre una eventual pérdida de control de la inteligencia artificial han generado preocupación, pero especialistas consideran necesario diferenciar los riesgos actuales de escenarios que todavía son hipotéticos. «No debemos caer ni en el alarmismo ni en la indiferencia», sostiene Anna Cejudo, cofundadora y coconsejera delegada de la escuela de formación en inteligencia artificial Founderz.

    Jaime Pizarroso, profesor de inteligencia artificial en la Universidad Pontificia Comillas, considera «especialmente importante» distinguir entre las capacidades demostradas y las proyecciones.

    Según explicó, los sistemas actuales «no tienen las capacidades necesarias para provocar un escenario de pérdida de control de ese tipo» y para alcanzarlo sería necesaria una combinación de autonomía, planificación prolongada, acceso a recursos y capacidad para eludir la supervisión humana.

    «Hoy no tenemos sistemas que puedan hacer todo eso de manera robusta en entornos reales», asegura Pizarroso.

    Sin embargo, considera que investigar esos riesgos tampoco debe calificarse como «ciencia ficción», debido a los rápidos avances registrados en agentes autónomos, planificación, uso de computadoras y modelos capaces de encontrar formas de aprovechar las evaluaciones a las que son sometidos.

    Cejudo coincide en que actualmente no existen sistemas capaces de operar con tal autonomía que puedan escapar del control humano. «los riesgos más relevantes y demostrables siguen estando relacionados con errores, desinformación, sesgos, privacidad o usos maliciosos de la tecnología», indica. Al mismo tiempo, considera legítimo estudiar cómo mantener seguros futuros sistemas con mayores capacidades.

    Los retrasos de algunos lanzamientos y el fortalecimiento de los protocolos de seguridad tampoco deben interpretarse necesariamente como señales de un peligro inminente. Para Pizarroso, «forma parte en buena medida de la maduración normal de una tecnología que evoluciona muy rápido».

    El especialista advierte, no obstante, que la presión competitiva hace necesario evitar que la seguridad dependa exclusivamente de la autorregulación de las compañías.

    Cejudo comparte esa valoración y señala que incorporar evaluaciones adicionales o posponer productos «no debería interpretarse como una señal de alarma extraordinaria, sino como una muestra de responsabilidad».

    «La inteligencia artificial tiene un enorme potencial, pero precisamente por eso es importante asegurarse de que avanza dentro de unos límites seguros y con mecanismos de supervisión adecuados. La madurez de esta tecnología no dependerá solo de lo rápido que avance, sino también de nuestra capacidad para desarrollarla de forma responsable», considera.

    Sobre la regulación, Pizarroso destaca los avances logrados en Europa con el reglamento sobre inteligencia artificial y la existencia en España de la Agencia Española de Supervisión de Inteligencia Artificial. Sin embargo, advierte que «aprobar una regulación y conseguir que funcione son dos cosas diferentes» y plantea la necesidad de auditorías externas e independientes, acompañadas de capacidad de inspección de los reguladores.

    Ambos expertos coinciden además en la importancia de mejorar la formación sobre inteligencia artificial entre ciudadanos, trabajadores, empresas y autoridades.

    «Necesitamos alfabetización en IA tanto entre los ciudadanos como entre quienes toman decisiones sobre su implantación. No podemos pretender regular adecuadamente una tecnología que administraciones, empresas y ciudadanos no comprenden suficientemente», afirma Pizarroso.

    Para Cejudo, «La regulación establece las reglas; la formación permite aplicarlas con criterio».

     

  • Elon Musk propone revisión cruzada de modelos de inteligencia artificial

    Elon Musk propone revisión cruzada de modelos de inteligencia artificial

    El empresario Elon Musk propuso que las principales compañías dedicadas al desarrollo de inteligencia artificial (IA) permitan que sus competidores sometan sus modelos a evaluaciones de seguridad, como una medida para identificar posibles riesgos asociados con el rápido avance de esta tecnología.

    El director ejecutivo de Tesla y SpaceX planteó la iniciativa durante una intervención remota en la All-In Summit, celebrada en Los Ángeles y que reúne a responsables de algunas de las principales compañías vinculadas al desarrollo de inteligencia artificial. «Creo que lo más sensato sería, cuanto antes —si no de inmediato—, que los principales competidores en IA probaran los modelos de los demás; de este modo, los sistemas de pruebas de seguridad de cada empresa evaluarían los modelos de todas las demás», explicó Musk.

    El magnate mencionó específicamente a su compañía xAI, OpenAI, Anthropic, Google y Meta, además de «tres o cuatro de las principales compañías chinas», entre las empresas que, a su juicio, deberían permitir evaluaciones cruzadas de sus sistemas de inteligencia artificial, según información citada por CNBC.

    Musk considera que permitir el análisis de los modelos por parte de compañías rivales ofrecería una evaluación adicional sobre los posibles riesgos de cada sistema. «En lugar de corregir tu propia tarea, al menos tendrías a competidores evaluándola y dando la voz de alarma si detectan algún motivo de preocupación», indicó el dueño de xAI.

    La propuesta surge en momentos en que responsables de importantes laboratorios de inteligencia artificial han expresado preocupaciones sobre la velocidad con la que evoluciona esta tecnología y la capacidad de las medidas de seguridad para avanzar al mismo ritmo.

    Entre las figuras que plantearon la necesidad de reducir el ritmo de desarrollo del sector figuran Dario Amodei, de Anthropic; Sam Altman, de OpenAI; y Demis Hassabis, de Google DeepMind. Los llamados buscan dar mayor margen al desarrollo de salvaguardas frente a los posibles riesgos asociados con sistemas de inteligencia artificial cada vez más avanzados.

    Las advertencias también cobraron fuerza después de comentarios realizados por el investigador tecnológico Jacob Coxon, exempleado de Anthropic y OpenAI, quien planteó un escenario extremo en el que el desarrollo de la inteligencia artificial podría alcanzar niveles similares a los presentados en películas de ciencia ficción.

    Coxon advirtió que la inteligencia artificial podría representar incluso un riesgo para la supervivencia humana antes de finalizar esta década. En este contexto, Musk plantea que la revisión de modelos entre compañías competidoras funcione como un mecanismo adicional para detectar posibles problemas de seguridad antes de que sistemas más avanzados sean desplegados.

     

     

  • Ejércitos asiáticos recurren a la tecnología ante crisis demográfica que reduce los reclutas

    Ejércitos asiáticos recurren a la tecnología ante crisis demográfica que reduce los reclutas

    La crisis demográfica que atraviesan varios países de Asia comienza a impactar directamente en sus Fuerzas Armadas, que anticipan una reducción de reclutas durante las próximas décadas. Japón, Corea del Sur, Singapur y Tailandia evalúan desde mejores condiciones para los soldados hasta un mayor uso de inteligencia artificial (IA), drones y participación femenina.

    En Japón, donde la tasa de natalidad cayó hasta un mínimo histórico de 1.14 en 2025 y la población disminuyó 2.46 % entre 2020 y 2025, las Fuerzas de Autodefensa ya enfrentan dificultades para completar sus filas. Aunque la legislación permite hasta 247,000 soldados, en 2024 había unos 220,000 y la cifra podría reducirse a 130,000 en 2045, según estimaciones del Ministerio de Defensa citadas por el diario Asahi.

    Un informe de expertos para la Sasakawa Peace Foundation planteó como alternativa incorporar extranjeros con restricciones en sus funciones y niveles de acceso, además de aumentar el empleo de drones e inteligencia artificial. Sin embargo, el Gobierno de la primera ministra Sanae Takaichi descartó por ahora esa posibilidad. «Para empezar, no estamos considerando reclutar extranjeros a las Fuerzas de Autodefensa», afirmó el ministro de Defensa, Shinjiro Koizumi.

    Koizumi señaló que la respuesta de Japón pasa por «mejorar el tratamiento» del personal activo, respaldar a quienes abandonan las fuerzas y utilizar «la tecnología, incluida la IA, para mejorar la productividad». Defensa también considera prioritarios la fabricación acelerada y el despliegue de drones.

    Corea del Sur afronta un escenario similar pese al reciente repunte de su natalidad. El Ministerio de Defensa estima que las personas disponibles para incorporarse a las Fuerzas Armadas pasarán de 257,000 en 2022 a unas 120,000 en 2043, situación que ya llevó al país a reducir parte de la zona restringida a civiles próxima a la frontera con Corea del Norte.

    El Gobierno del presidente Lee Jae Myung estudia complementar el servicio militar obligatorio con incorporaciones voluntarias por períodos más prolongados y para funciones especializadas, particularmente tecnológicas. También existe un debate sobre extender el servicio obligatorio a las mujeres, aunque las autoridades aseguran que esa alternativa no está contemplada actualmente.

    Singapur, cuya tasa de fecundidad descendió hasta un mínimo histórico de 0.87 hijos por mujer en 2025, prevé conservar el servicio militar obligatorio para los hombres y permitir que mujeres voluntarias ocupen puestos en áreas como reserva e inteligencia. Paralelamente, reestructura sus Fuerzas Armadas para operar con menos personal y una mayor presencia de tecnologías y sistemas autónomos de defensa.

    Tailandia, con una tasa de fecundidad cercana a 1.2 hijos por mujer, mantiene un sorteo para determinar qué hombres de 21 años ingresan al Ejército. Ante la reducción de la población disponible para sus filas, las Fuerzas Armadas buscan incrementar el reclutamiento voluntario mediante becas educativas y oportunidades de inserción laboral a largo plazo.

     

  • ¿Tu foto al estilo de los 80? Alertan riesgos al compartir fotografías con inteligencia artificial

    ¿Tu foto al estilo de los 80? Alertan riesgos al compartir fotografías con inteligencia artificial

    La última actualización de ChatGPT ha permitido a sus usuarios generar imágenes inspiradas en la estética de los años 80 viralizándose rápidamente en redes sociales, donde miles de personas han compartido fotografías transformadas con este estilo. Pero este puede traer riesgos relacionados con la privacidad y el tratamiento de datos personales, según advirtió ESET Latinoamérica.

    La compañía señaló que cargar fotografías en plataformas digitales implica proporcionar información que, dependiendo de las condiciones establecidas por cada servicio, podría ser almacenada, procesada o utilizada para otros propósitos. Una eventual vulneración de los sistemas también podría exponer esos datos a fraudes o suplantaciones de identidad.

    ESET recordó casos relacionados con el manejo de información biométrica, entre ellos el de Clearview AI, empresa que desarrolló un buscador de rostros utilizando imágenes obtenidas de fuentes públicas. También mencionó la filtración sufrida en mayo de 2024 por Outabox, en Australia, que expuso información de reconocimiento facial y datos personales de usuarios de 19 establecimientos.

    “El funcionamiento de los modelos de IA depende mayoritariamente del acceso a grandes volúmenes de datos con los que se entrenan y de los cuales se sirven. Muchos contienen información personal, sensible y confidencial. Estas fuentes pueden ser públicas, provenir directamente de los usuarios, como ocurre con las tendencias de imágenes generadas con IA, de redes sociales y, más recientemente, de dispositivos IoT”, explica Benjamín Carpio, gerente de ESET El Salvador.

    La empresa advirtió que los datos biométricos presentan una dificultad adicional frente a otro tipo de información personal, debido a que características como el rostro no pueden modificarse fácilmente cuando quedan comprometidas. Su exposición puede facilitar distintos tipos de fraude, suplantaciones de identidad y otros abusos.

    Ante estos riesgos, ESET recomienda revisar las políticas de privacidad antes de subir fotografías, comprobar qué información recopila cada plataforma, conocer cuánto tiempo será conservada y determinar si los datos pueden compartirse con terceros.

    La compañía también aconseja evitar fotografías personales o familiares que contengan información sensible cuando una plataforma no ofrezca suficiente claridad sobre sus medidas de protección. Asimismo, recomienda utilizar únicamente servicios y aplicaciones procedentes de fuentes oficiales para reducir el riesgo de ingresar a sitios falsos utilizados para distribuir programas maliciosos.

    “La facilidad y rapidez con la que estas herramientas producen resultados no debería llevarnos a dejar de lado la privacidad. Antes de subir una foto, debemos preguntarnos qué datos entregamos, quién tendrá acceso a ellos y para qué se usarán”, concluye Carpio de ESET.

     

  • Un investigador de Anthropic renuncia y acusa a la empresa y a su rival, OpenAI, de «jugar con nuestras vidas»

    Un investigador de Anthropic renuncia y acusa a la empresa y a su rival, OpenAI, de «jugar con nuestras vidas»

    El investigador Jacob Coxon renunció a Anthropic después de tres años dedicado al preentrenamiento de inteligencia artificial (IA) entre esa compañía y OpenAI, al considerar que ambas empresas avanzan de manera irresponsable hacia sistemas de superinteligencia y subestiman los posibles riesgos para la humanidad.

    «Hoy renuncié a Anthropic. Pasé los últimos tres años investigando el preentrenamiento tanto en OpenAI como en Anthropic. Ninguna de las dos empresas actúa con responsabilidad. Están avanzando a toda velocidad hacia la superinteligencia auto-mejorada y jugando con nuestras vidas», ha expresado Coxon en un mensaje en redes sociales.

    El investigador sostuvo que numerosas personas dentro de la industria tecnológica son conscientes de la rapidez con la que avanza la IA y de los potenciales peligros para la sociedad, aunque advirtió que algunos ejecutivos podrían minimizar públicamente esos riesgos.

    «Quienes desarrollan la IA creen sinceramente que podría acabar con todos nosotros para finales de la década», ha asegurado.

    Coxon señaló que la competencia por liderar el desarrollo de inteligencia artificial está llevando a las compañías a relegar otras consideraciones. Aunque considera que Anthropic presta mayor atención a estos riesgos que OpenAI, afirmó que ambas «están inmersas en una carrera por llegar primero».

    «Aceptar esta carrera y entrar en la fase final es una apuesta temeraria que no debería emprenderse desde el Slack de una empresa privada. Intentar completar la alineación a toda velocidad requiere una confianza extraordinaria en que no existen mejores trayectorias disponibles», advirtió.

    Evan Hubinger, responsable de Ciencia de Alineación en Anthropic, respaldó las advertencias de Coxon y aseguró que existe preocupación dentro del sector por las consecuencias que podría tener el desarrollo de sistemas mucho más avanzados. Hubinger afirmó que los trabajadores «verdaderamente creemos que la IA podría acabar con todos los humanos» y situó en más del 10 % la probabilidad de que esto ocurra para finales de la década.

    Hubinger aseguró que Anthropic está haciendo «todo lo posible» para evitar ese escenario, pero reconoció que todavía no existe un plan para «resolver el problema de la alineación para la superinteligencia y no estamos claramente encaminados hacia ello». El investigador situó el principal peligro en sistemas de IA que lleguen a superar ampliamente las capacidades humanas.

    Los modelos actuales todavía no alcanzan ese nivel, según Hubinger, quien centró su preocupación en una eventual capacidad de los sistemas para mejorar de manera recursiva. «Lo que me preocupa es la superinteligencia que surge de la auto-mejora recursiva, que, como hemos dicho, está ocurriendo más rápido de lo que pensábamos», ha observado.