Profhesee anuncia el fin de las fotos borrosas… y videos de José Antunes

Una de las novedades más emocionantes del reciente Mobiel World Congress, en Barcelona, ​​no fue un producto, sino una tecnología que acabará con las imágenes borrosas tanto en fotografía como en videografía en smartphones.

Las compañías de teléfonos inteligentes han prometido llevar la fotografía móvil al siguiente nivel y se han dado algunos pasos gigantes en la última década, pero ahora estamos en un punto en el que pueden estar a punto de ocurrir cambios drásticos… eso significa que todos los teléfonos inteligentes que se acaban de comprar serán obsoletos si cumplen La asociación entre la empresa francesa Prophesee y Qualcomm en su promesa de acabar con el desenfoque de movimiento y otros artefactos de calidad de imagen causados ​​por los sensores tradicionales, especialmente en escenas de alta dinámica y condiciones de poca luz, acerca la fotografía y la videografía a nuestros experiencias del mundo real.

Si esta no es otra promesa más de Lytro, lo arreglaremos nuevamente, estamos a punto de presenciar una nueva era en términos de fotografía de teléfonos inteligentes, ya que las dos compañías acordaron una colaboración de varios años para permitir la compatibilidad nativa entre el evento de Prophesee. basado en software, sensores Metavision y plataformas móviles premium de Snapdragon. .

Dado que se espera que los kits de desarrollo de Prophesee estén disponibles este año, el objetivo es ayudar a acelerar la adopción de las soluciones de Prophesee por parte de la industria móvil, que han sido anunciadas como el «Santo Grial» capaz de agregar una nueva dimensión de detección a la fotografía móvil. Según la compañía, su tecnología es capaz de cambiar el paradigma en la captura de imágenes tradicional al enfocarse únicamente en los cambios en una escena, píxel por píxel, continuamente, a velocidades extremas.

Prophesee afirma que cada píxel en un sensor Metavision incluye un núcleo lógico, que le permite actuar como neuronas, y agrega que «cada uno se activa de manera inteligente y asíncrona según la cantidad de fotones que detecta. Un píxel que se activa se llama evento». En esencia, los eventos impulsados ​​por la dinámica de la escena, ya no son un reloj aleatorio, por lo que la velocidad de adquisición siempre coincide con la dinámica de la escena real”.

Una nueva esperanza para la fotografía deportiva

La forma en que funciona, la eliminación de ruido basada en eventos de alto rendimiento se logra mediante la sincronización de un sensor basado en cuadros y un sensor Prophesee basado en eventos. Luego, el sistema llena los espacios entre y dentro de los cuadros con eventos de microsegundos para extraer algorítmicamente información de movimiento puro y corregir el desenfoque de movimiento. Las dos imágenes de los jugadores de tenis explican esto de manera simple: una cámara normal registrará el desenfoque, mientras que Prophesee creará un resultado nítido. Cualquier parte de eso es fotografía o video y cualquier parte de la IA que se despierte para llenar los vacíos es lo que algunos puristas ahora pueden cuestionar. Sin embargo, el camino a seguir parece estar claro: ¡menos borroso!

Según las empresas, la colaboración técnica y comercial proporcionará a los desarrolladores de dispositivos móviles una manera rápida y eficiente de aprovechar la capacidad del sensor Prophesee para mejorar significativamente el rendimiento de la cámara, particularmente en escenas dinámicas de movimiento rápido (como escenas deportivas) y en poca luz, a través de un enfoque de detección continuo y asíncrono para píxeles basados ​​en eventos. Prophesee está desarrollando un conjunto de herramientas para respaldar la integración de la tecnología de sensores Metavision para usar con dispositivos con plataformas Snapdragon de próxima generación.

«Prophesee es un claro líder en la aplicación de tecnologías neuromórficas para abordar las limitaciones de las cámaras tradicionales y mejorar la experiencia general del usuario. Creemos que esta es una tecnología innovadora para llevar la fotografía móvil al siguiente nivel», dijo Judd Heap, vicepresidente de Product Management, Qualcomm Technologies. Nuestra colaboración, tanto técnica como comercialmente, ayudará a impulsar la adopción de OEM». incluso en los entornos más exigentes, abriendo el abanico de nuevas posibilidades para los clientes de Snapdragon.

«Estamos entusiasmados de trabajar con el proveedor de una de las plataformas móviles más populares del mundo para integrar información basada en eventos en el ecosistema Snapdragon. A través de esta colaboración, los desarrolladores de productos podrán mejorar drásticamente la experiencia del usuario con cámaras que brindan calidad de imagen y la excelencia operativa no está disponible con los métodos tradicionales, solo basada en el marco tradicional”, dijo Luca Ferri, director ejecutivo y cofundador de Prophesee.

Entonces, para fines de 2023, Prophesee espera tener formas de llevar la velocidad, la eficiencia y la calidad de la visión asistida por nervios a los dispositivos móviles a través de sus plataformas móviles premium Snapdragon. Inspirados en el ojo humano, los sensores basados ​​en eventos de Profhesee están configurados para ayudar a la fotografía de teléfonos inteligentes a dar un gran paso adelante para cerrar la brecha mientras se mantienen detrás de las cámaras tradicionales.

Si el sistema funciona como se sugiere, la fotografía de deportes y acción, que han sido áreas prohibidas para los teléfonos inteligentes en general, se convertirá en un nuevo campo de juego. Recientemente escuché una conversación entre fotógrafos profesionales sobre cómo los teléfonos inteligentes pueden o no usarse para la fotografía deportiva. Con la nueva versión de profetizado Sensores basados ​​en eventos, cualquier conclusión aceptada como válida debe ser reconsiderada.