Prophesee, con sede en París, causó sensación el año pasado cuando presentó su tecnología interna de sensores Metavision para cámaras de celulares. La idea central detrás de la idea era hacer que las imágenes borrosas fueran cosa del pasado, demostrando algunos resultados impresionantes durante la fase de desarrollo.
En el MWC 2024, ha logrado otro gran avance en asociación con Qualcomm. La compañía, que está haciendo un trabajo serio en el campo de los sistemas de visión neuromórfica, ha anunciado que su tecnología de sensores Metavision ha llegado a la etapa de producción.
Prophesee le dijo a Digital Trends en inglés y al periodista Nadeem Sarwar, que ha desarrollado un sensor en colaboración con Sony que aprovecha el ajuste de software personalizado y la potencia de fuego proporcionada por el chipset Snapdragon 8 Gen 3 de primera línea de Qualcomm. A un nivel fundamental, el sensor Metavision llena el vacío de datos visuales a un ritmo de microsegundos junto con un sensor de imagen, lo que abre las puertas a imágenes borrosas tanto en escenarios oscuros como extremadamente brillantes.
«Los sensores Metavision patentados de Prophesee y la IA imitan cómo funcionan el ojo y el cerebro humanos», dice la compañía. El enfoque basado en eventos de la tecnología de sensores MetaVision despliega la cancelación de desenfoque de movimiento para garantizar que los resultados finales no muestren ningún signo de borrosidad provocada por el movimiento.
Cómo Prophesee está tratando de matar las fotos borrosas
La mayoría de las cámaras de los teléfonos inteligentes, incluso los buques insignia de primer nivel, luchan con objetos que se mueven rápidamente, sin mantener un bloqueo de enfoque adecuado. Como resultado, las imágenes no solo se ven fuera de lugar, sino que los artefactos de movimiento las hacen casi inútiles.
El desenfoque de movimiento se hace especialmente evidente en situaciones de luz difíciles o por la noche, cuando soluciones como la reducción de ruido de varios fotogramas no están a la altura de su verdadero potencial. Prophesee afirma ofrecer «niveles sin precedentes» de calidad de imagen en «escenas de movimiento rápido y con poca luz».
A diferencia del sensor típico de la cámara de un teléfono inteligente en el que la cantidad de luz varía en el transcurso de la ventana de exposición, el sensor Metavision facilita un «tiempo de exposición perpetuo» para capturar el movimiento de forma continua. «Es como si tuvieras una cámara de 10.000 imágenes por segundo en tu teléfono», afirma la compañía.
Además de ofrecer un sensor personalizado desarrollado conjuntamente con Sony, Prophesee también está prestando la misma atención a la pila de software y a los servicios de integración que lo acompañan. «El software Metavision Deblur está llegando a la fase de producción. Estamos integrando tanto HW como SW en los teléfonos móviles», dice la compañía a Digital Trends.
La idea es ofrecer una experiencia perfecta a los jugadores de la industria de los teléfonos inteligentes para que implementen todo el kit de hardware y software de Metavision en sus respectivos dispositivos impulsados por Snapdragon. En particular, la línea de base se ha establecido en el silicio insignia Snapdragon 8 Gen 3, aparentemente debido a su potencia de fuego bruta, ISP avanzado y habilidades de IA de próxima generación.
Un futuro emocionante para las cámaras de los teléfonos inteligentes
La solución de Prophesee se encuentra en un estado completamente funcional en el sensor de la cámara móvil Sony IMX636. Actualmente, la tecnología solo se ha probado para la cámara principal de un teléfono. La compañía, sin embargo, le dice a Digital Trends que las futuras iteraciones del sensor Metavision están considerando el soporte para múltiples sensores, incluidos los sensores ultra anchos y de tipo teleobjetivo.
En su estado actual, el sensor basado en eventos de Prophesee solo puede hacer su magia para producir imágenes fijas sin desenfoque. Pero la compañía nos dice que el soporte para videos también está en la hoja de ruta futura.
«Es principalmente una plataforma de detección de video, que se utiliza para capturar y procesar movimiento en una variedad de casos de uso», dijo un portavoz de Prophesee a Digital Trends. La compañía no especificó cuándo exactamente veremos un sensor Metavision en acción en un teléfono inteligente disponible comercialmente. Como nota positiva, los teléfonos con Qualcomm Snapdragon 8 Gen 3 ya están en el mercado, y con la cartera de Metavision ahora en la etapa de producción, no debería ser una larga espera.
Por lo que Prophesee ha mostrado en demostraciones hasta ahora, si el sensor Metavision cumple esas promesas, podría abrir un capítulo completamente nuevo para la fotografía de teléfonos inteligentes en el que un usuario promedio no tendrá que ajustar la velocidad de obturación y otros parámetros para obtener imágenes nítidas. Y ese es un futuro muy emocionante en el que pensar.
