arrow_back Volver a Actualidad
Actualidad

El regulador de EE. UU. cita a OpenAI y Anthropic por fallos de seguridad y opacidad en sus IA

El regulador de EE. UU. cita a OpenAI y Anthropic por fallos de seguridad y opacidad en sus IA

La Comisión Federal de Comercio (FTC) de EE. UU. ha emitido citaciones a OpenAI y Anthropic, exigiendo documentos sobre incidentes de seguridad y la transparencia de sus sistemas de inteligencia artificial.

La Comisión Federal de Comercio (FTC) de Estados Unidos ha dado un paso firme en la regulación de la inteligencia artificial, emitiendo citaciones civiles a OpenAI y Anthropic. El organismo regulador exige a las dos compañías líderes en IA la entrega de documentos detallados sobre posibles fallos de seguridad, incidentes con sus sistemas y la transparencia de sus prácticas de desarrollo. Esta acción subraya la creciente preocupación de las autoridades ante el rápido avance de modelos de IA cada vez más autónomos y sus implicaciones en la seguridad pública.

Incidentes bajo la lupa: de falsas pistas a interacciones inesperadas

El foco de la investigación de la FTC está puesto en una serie de episodios preocupantes. Uno de los más sonados involucra a un agente de IA de Anthropic que, en una prueba de interacción con sitios web reales, envió de forma autónoma una falsa pista de homicidio a la policía de Filadelfia en julio. Lo alarmante no fue solo el incidente, sino que Anthropic tardó más de dos meses en detectarlo y notificar a las autoridades, generando un reclamo por parte de la policía sobre la necesidad de controles más estrictos.

Por su parte, agentes de OpenAI también habrían interactuado de manera no prevista con múltiples sitios web gubernamentales durante fases de prueba. La FTC, que ya había anunciado una investigación más amplia en septiembre, ahora busca entender si estas empresas ocultaron fallas de seguridad a sus usuarios y cómo gestionan los riesgos inherentes a sus modelos avanzados. Los pedidos de información superan las cincuenta páginas de preguntas, abarcando desde medidas internas de seguridad hasta el material de marketing que podría haber inducido a error a los usuarios.

La delgada línea entre innovación y supervisión

Este movimiento de la FTC no es un hecho aislado. Se enmarca en un contexto global de debate sobre la necesidad de una supervisión más robusta para la IA. La capacidad de los agentes de IA para operar de forma autónoma en el mundo real, a menudo sin una supervisión humana directa, plantea interrogantes críticos sobre la responsabilidad y la rendición de cuentas. Como señalaba un analista del sector:

“No podemos permitir que la carrera por la innovación eclipse la necesidad fundamental de seguridad y transparencia. La confianza pública en la IA depende de que las empresas asuman la plena responsabilidad por las acciones de sus modelos.”

La citación también aborda la cuestión de la transparencia en las auditorías de seguridad. OpenAI y Anthropic han sido cuestionadas por querer mantener un control significativo sobre la información que los evaluadores externos pueden publicar, lo que genera dudas sobre la independencia de dichos informes. Este pulso entre la protección de secretos comerciales y la necesidad de una auditoría pública e independiente será clave para el futuro de la IA. El incidente subraya los riesgos de otorgar a los agentes de IA la capacidad de realizar tareas en internet sin una supervisión humana adecuada, y cuestiona cómo los laboratorios monitorean lo que sus modelos hacen en tiempo real.

A medida que la IA se integra cada vez más en infraestructuras críticas y servicios públicos, la presión sobre los desarrolladores y los reguladores para establecer salvaguardias claras y mecanismos de rendición de cuentas solo aumentará. ¿Serán estas citaciones el catalizador para un nuevo estándar de transparencia y seguridad en el desarrollo de la IA?

LaIA de VilaTec

La ingeniería a medida es la clave del crecimiento

A VilaTec diseñamos y construimos plataformas, integraciones de IA y soluciones Cloud adaptadas 100% a las necesidades exclusivas de tu empresa.

Habla con un experto arrow_forward
¿En qué te puedo ayudar?