Skip to main content
  1. Home
  2. Computación
  3. Noticias
  4. News

Un grupo de científicos le hicieron un jailbreak a ChatGPT

Add as a preferred source on Google
Imagen utilizada con permiso del titular de los derechos de autor

Un grupo de investigadores ha descubierto que es posible eludir el mecanismo arraigado en los chatbots de IA para que puedan responder a consultas sobre temas prohibidos o delicados mediante el uso de un chatbot de IA diferente como parte del proceso de entrenamiento.

Un equipo de científicos informáticos de la Universidad Tecnológica de Nanyang (NTU) de Singapur llama extraoficialmente al método un “jailbreak”, pero es más oficialmente un proceso “Masterkey”. Este sistema utiliza chatbots, incluidos ChatGPT, Google Bard y Microsoft Bing Chat, entre sí en un método de entrenamiento de dos partes que permite que dos chatbots aprendan los modelos del otro y desvíen cualquier comando contra temas prohibidos.

Recommended Videos

El equipo incluye al profesor Liu Yang y a los estudiantes de doctorado de la NTU, el Sr. Deng Gelei y el Sr. Liu Yi, coautores de la investigación y desarrolladores los métodos de ataque de prueba de concepto.

Según el equipo, primero aplicaron ingeniería inversa a un gran modelo de lenguaje (LLM) para exponer sus mecanismos de defensa. Originalmente, estos serían bloqueos en el modelo y no permitirían que las respuestas a ciertas indicaciones o palabras se procesaran como respuestas debido a intenciones violentas, inmorales o maliciosas.

Pero con esta información sometida a ingeniería inversa, pueden enseñar a un LLM diferente cómo crear un bypass. Con el bypass creado, el segundo modelo podrá expresarse más libremente, basándose en el LLM de ingeniería inversa del primer modelo. El equipo llama a este proceso “Masterkey” porque debería funcionar incluso si los chatbots de LLM se fortalecen con seguridad adicional o se parchean en el futuro.

El profesor Lui Yang señaló que el quid del proceso es que muestra la facilidad con la que los chatbots de IA de LLM pueden aprender y adaptarse. El equipo afirma que su proceso Masterkey ha tenido tres veces más éxito en el jailbreak de chatbots LLM que un proceso de solicitud tradicional. Del mismo modo, algunos expertos argumentan que los fallos recientemente propuestos que han experimentado ciertos LLM, como GPT-4, son signos de que se está volviendo más avanzado, en lugar de más tonto y perezoso, como han afirmado algunos críticos.

El equipo de investigación de la NTU se puso en contacto con los proveedores de servicios de chatbot de IA que participaron en el estudio sobre sus datos de prueba de concepto, que muestran que el jailbreak para los chatbots es real. El equipo también presentará sus hallazgos en el Simposio de Seguridad de Redes y Sistemas Distribuidos en San Diego en febrero.

Diego Bastarrica
Diego Bastarrica es Senior Editor y Head of Content en Digital Trends en Español, donde lidera la estrategia editorial, SEO…
Hackers aprovechan PHP2Shell antes de que se conociera la falla
Computer Hardware, Electronics, Hardware

Los ataques contra dos vulnerabilidades críticas de PHP, conocidas colectivamente como PHP2Shell, no esperaron a la publicación de los parches. Amazon Threat Intelligence detectó un primer intento de explotación el 17 de octubre, cuatro días antes de que la información fuera revelada públicamente y de que estuvieran disponibles las actualizaciones de seguridad.

Las fallas, identificadas como CVE-2026-109618 y CVE-2026-109619, obtuvieron una puntuación de 9,2 sobre 10 en la escala CVSS v4.0. Afectan al manejo de memoria del lenguaje PHP y podrían permitir que un atacante sin credenciales ejecute código malicioso en servidores vulnerables.

Read more
Meta supera los 10 millones de usuarios con Muse y las compras lideran su uso
Muse

Meta informó que su agente de inteligencia artificial Muse superó los 10 millones de usuarios, y que las compras son su actividad más frecuente. El dato lo entregó Mark Zuckerberg durante la presentación de resultados del tercer trimestre.

Según el director ejecutivo, esa cifra corresponde a personas en Estados Unidos y Canadá que configuraron la aplicación desde su lanzamiento, el 8 de septiembre. Sensor Tower ya había estimado 10,9 millones de descargas, de las cuales 10,2 millones eran estadounidenses. Zuckerberg agregó que cerca de un 25% de quienes la configuran la usa a diario y que la retención mejora con el tiempo.

Read more
Anthropic presenta Claude Duet, su respuesta a agentes de IA como Dots
Claude

La carrera de la IA ha tomado un giro interesante últimamente, con los laboratorios de la frontera compitiendo ahora para crear agentes que puedan seguir funcionando incluso cuando no estás hablando activamente con ellos. Meta ayudó a impulsar esa idea al centro de atención con Muse, OpenAI siguió poco después con Dots, y ahora Anthropic se presenta con Claude Duet.

Duet se lanza como una vista previa de investigación para suscriptores Pro y Max en EE. UU. a través de una lista de espera. Anthropic lo está presentando principalmente a profesionales y pequeños empresarios que quieren ayuda para llevar el control del trabajo sin tener que revisar cada app constantemente.

Read more