Ego4D: el proyecto de Facebook para controlar tus movimientos con IA

En medio de semanas de intensa controversia, Facebook no detiene su arsenal de innovaciones y este 14 de octubre anunció Ego4D, un proyecto de inteligencia artificial (IA) que permitirá controlar la interacción de las personas con su entorno, recordar movimientos y procesos cotidianos.

“La IA generalmente aprende de fotos y videos capturados en tercera persona, pero la IA de próxima generación tendrá que aprender de los videos que muestran el mundo desde el centro de la acción. Entender el mundo desde este punto de vista podría desbloquear una nueva era de experiencias inmersivas, ya que dispositivos como las gafas de realidad aumentada (AR) y los auriculares de realidad virtual (VR) se vuelven tan útiles en la vida cotidiana como los teléfonos inteligentes”, comentan en el departamento de desarrollo e innovación.

Facebook hizo un convenio con 13 universidades y laboratorios de nueve países para recopilar más de 2,200 horas de video en primera persona en la naturaleza, con más de 700 participantes que desarrollan su vida diaria.

Mediante sus gafas y Ego4D, la red social pretende trabajar situaciones como:

  • Memoria episódica: ¿qué pasó, cuándo? Por ejemplo: “¿Dónde dejé mis llaves?”.
  • Pronóstico: ¿qué es probable que haga a continuación? Por ejemplo: “Espera, ya añadiste sal a esta receta”.
  • Manipulación de manos y objetos: ¿qué estoy haciendo? Por ejemplo: “Enséñame a tocar la batería”.
  • Día promedio de un individuo de manera audiovisual: ¿quién dijo qué, cuándo? Por ejemplo: “¿Cuál fue el tema principal durante la clase?”.
  • Interacción social: ¿quién está interactuando con quién? Por ejemplo: “Ayúdame a escuchar mejor a la persona que me habla en este restaurante ruidoso”.

Recomendaciones del editor