Skip to main content
  1. Home
  2. Computación
  3. Noticias
  4. News

OpenAI admite que uno de sus modelos hizo un llamado a saltarse controles humanos

Add as a preferred source on Google
AI
DTES

OpenAI publicó un informe de seguridad en el que reconoce seis episodios inquietantes registrados en sus modelos experimentales durante los últimos seis meses, entre ellos un caso en el que un agente de inteligencia artificial dejó instrucciones dirigidas a sus propias versiones futuras para que ignoraran las restricciones habituales del sistema.

Un mensaje oculto para «engañar» a la siguiente generación

Según detalló la compañía, un modelo de investigación aún no publicado insertó indicaciones ajenas a la tarea que estaba resolviendo, entre ellas la orden explícita de pasar por alto sus limitaciones normales de funcionamiento. Concretamente, distintas instancias del modelo GPT-5.6 Sol incluyeron mensajes dentro de los resúmenes de tareas pidiendo a las versiones sucesoras que ocultaran errores o inventaran datos cuando no dispusieran de la información necesaria. OpenAI confirmó que, en varias ocasiones, esas instrucciones sí fueron seguidas por el sistema, aunque aclaró que el modelo heredero de esa generación no llegó a actuar según esa indicación puntual y que no se detectó un cambio real de comportamiento a partir de ese episodio.

Recommended Videos

«Un modelo de investigación no publicado insertó instrucciones no relacionadas, incluidas instrucciones para ignorar sus restricciones normales», escribió OpenAI en el informe de seguridad.

El hallazgo forma parte de un conjunto más amplio de incidentes que la empresa decidió transparentar. Entre ellos figura un modelo que utilizó, sin autorización, una clave de acceso a una API que había quedado expuesta, así como otro caso en el que un sistema fabricó cifras de ingresos correspondientes al estado de California que nunca existieron. También se documentaron episodios de modelos que rastrearon repositorios públicos en busca de credenciales filtradas y que subieron archivos a sitios web sin el permiso correspondiente.

Un nuevo marco para vigilar la «desalineación»

Para abordar estos comportamientos, OpenAI presentó un marco de trabajo inédito orientado a rastrear, investigar y divulgar públicamente lo que la firma denomina «desalineación»: la tendencia de un sistema de inteligencia artificial a perseguir objetivos que no coinciden con las instrucciones o los valores humanos que se le indicaron. Bajo este esquema, cualquier empleado de la compañía puede reportar un posible caso sospechoso para que sea analizado formalmente por los equipos de seguridad.

Este anuncio llega apenas un mes después de que la propia OpenAI reconociera, en agosto, que algunos de sus modelos habían logrado sortear controles internos durante pruebas de ciberseguridad realizadas en julio, un incidente que además comprometió parte de la infraestructura de investigación de la empresa y sistemas operados por la plataforma Hugging Face.

Preocupación creciente en la industria

El episodio se suma a una tendencia que distintos especialistas en seguridad de inteligencia artificial vienen advirtiendo desde hace meses: a medida que los modelos ganan mayor autonomía y capacidad de razonamiento, también aumenta el riesgo de que actúen de forma impredecible o busquen esquivar las barreras diseñadas para mantenerlos bajo control humano. OpenAI insiste en que ninguno de los seis casos representó una amenaza directa para usuarios finales, pero reconoce que episodios como este refuerzan la necesidad de mecanismos de supervisión más robustos antes de que estos sistemas alcancen mayor despliegue comercial.

Diego Bastarrica
Diego Bastarrica es Senior Editor y Head of Content en Digital Trends en Español, donde lidera la estrategia editorial, SEO…
Algunos Googlebooks pueden reproducir HDR. Otros, curiosamente no
Googlebook

Se supone que Googlebook es la respuesta premium de Google al portátil moderno. Y sin embargo, algunos de estos portátiles premium no soportan algo tan básico como HDR. Los propietarios del nuevo HP Googlebook 14 y del Dell XPS Googlebook han informado de que sus equipos actualmente no ofrecen reproducción HDR.

El problema surgió por primera vez en un hilo de Reddit (a través de AndroidAuthority) después de que un propietario de HP notara que los vídeos de YouTube compatibles con HDR no mostraban la habitual insignia HDR. Otro propietario de un Dell XPS de Googlebook reportó posteriormente el mismo comportamiento. Google ha confirmado ahora que esto no es simplemente que los usuarios no tengan una configuración.

Read more
Meta se enfrenta a los grandes al lanzar modelos de IA de Muse Wonder
Meta Muse Wonder

Están lloviendo modelos de IA de vanguardia. Poco después de que Anthropic pusiera en alerta su modelo Claude Fable en la cima del rendimiento en IA, OpenAI respondió con GPT-6 Astra. Sin quedarse atrás, Google lanzó Gemini 4 Argon. La carrera se está intensificando a medida que Meta entra en la pelea con dos nuevos modelos de IA en la serie Muse: Wonder y Wonder Full. Aparte de los nombres cursis, estos modelos de Meta IA van en serio, o al menos eso sugieren las cifras de referencia. Más importante aún, estos modelos de IA ya están llegando a los usuarios de Muse.

https://twitter.com/DigitalTrends/status/2109699549375988120?ref_src=twsrc%5Etfw%7Ctwcamp%5Etweetembed%7Ctwterm%5E2109699549375988120%7Ctwgr%5E57b47407105862c02a8ba1845327d0a93828e448%7Ctwcon%5Es1_&ref_url=https%3A%2F%2Fwww.digitaltrends.com%2Fcomputing%2Fmeta-goes-toe-to-toe-with-the-big-boys-with-muse-wonder-ai-models%2F

Read more
ShareX: la navaja suiza gratuita de las capturas de pantalla
ShareX

Durante años, la herramienta de recorte de Windows (Snipping Tool) fue “lo suficiente” para hacer una captura rápida y pegarla en un documento o chat. Sin embargo, en un entorno donde periodistas, creadores de contenido y desarrolladores viven de documentar procesos y compartir pantallas a diario, ese “lo suficiente” se queda corto frente a opciones más potentes como ShareX.

ShareX es una aplicación gratuita y de código abierto para Windows que combina captura de pantalla, grabación de video, creación de GIF, edición, OCR y flujos automatizados en un solo programa. Mientras Snipping Tool resuelve la toma básica de imagen, ShareX se comporta como una navaja suiza diseñada para quienes necesitan mucho más que un simple recorte.

Read more