Lanzamiento de Qualcomm Spectra 380: el primer ISP del mundo con IA integrada

El Qualcomm Spectra 380 da un gran paso adelante en fotografía computacional e inteligencia artificial de cámara. ¡Lea todo sobre las enormes mejoras que se avecinan este año!

Ayer en Hawái, en la Cumbre Tecnológica Snapdragon, se presentó el tan esperado Qualcomm Snapdragon 855 fue lanzado. Si bien el nuevo chip trae varios cambios sustanciales (desde un GPS significativamente más preciso hasta la primera nueva versión WiFi de 2,4 GHz en un década, a la conectividad celular 5G), la discusión sigue volviendo a las imágenes y las enormes mejoras que el Qualcomm Spectra 380 trae.

Tradicionalmente, el ISP de la cámara se encargaba de transformar las salidas de color sin procesar de la cámara en algo que el resto de la cámara. El teléfono se puede utilizar para visión artificial, pero a medida que el procesamiento de IA se ha vuelto más complejo, la integración con hardware especializado se ha vuelto más compleja. crítico. Qualcomm dio los primeros pasos hacia esto con su Espectros Qualcomm 280

, incorporando soporte para reducción de ruido de cuadros múltiples y detección de profundidad directamente en el ISP, pero aún quedaba un largo camino por recorrer. Este año, Qualcomm da ese salto, integrando hardware de aceleración de visión por computadora directamente en el ISP Qualcomm Spectra 380 y creando lo que llaman el primer CV-ISP del mundo.

Qualcomm Spectra 380 eliminará los cuellos de botella en el proceso de procesamiento de imágenes y permitirá ahorrar hasta 4 veces más energía que las generaciones anteriores al realizar visión artificial. Procesamiento directamente en el propio ISP, lo que elimina la necesidad de activar la CPU, la GPU y el HSP para tareas complejas de IA en fotografía y mejora en gran medida la AR del procesador. capacidades.

Esto significa que la detección de profundidad por hardware, la clasificación y segmentación de objetos pueden ocurrir en tiempo real hasta 4k HDR 60Hz en el Qualcomm Snapdragon 855. Esto nos permitirá reemplazar objetos en vivo o fondos en video en tiempo real, abriendo nuevas posibilidades para Aplicaciones de realidad extendida (XR) con el chipset Qualcomm Snapdragon 855 tanto en teléfonos como en AR auriculares.

Sin embargo, las mejoras del Qualcomm Spectra 380 no se limitan a la IA y la RA. Qualcomm trabajó mucho en mejoras del espacio de color y el brillo, agregando soporte para grabación de video HDR10+ completa, lo que lo convierte en Es posible grabar vídeos con mayor rango dinámico y espacios de color más amplios, para aprovechar al máximo las capacidades de los teléfonos modernos. y televisores.

El nuevo ISP también ofrece aceleración de hardware mejorada para video VP9 y para el formato de imagen HEIF basado en HEVC, que puede ser un 50 % más pequeño. que los formatos de imagen más antiguos y ofrece una funcionalidad ampliada (aunque anticipamos mucho la incorporación de aceleración de hardware para el AV1 basado en AVIF, que se espera que esté disponible en los próximos años)

El Qualcomm Spectra 380 también podrá manejar imágenes de mayor resolución que años anteriores, con su sistema dual de 14 bits. Canal CV-ISP que admite captura simultánea de 22 MP a 30 Hz en cámaras duales y captura de 48 MP a 30 Hz con una sola imagen sensor. Sin embargo, en este caso, el canal de lectura del sensor más rápido no se traduce en video, donde el Qualcomm Spectra 380 admite los mismos 720p 480 Hz nativos (sin usar caché en el sensor) que el Spectra 280 lo hicieron.

Lo mejor de todo es que Qualcomm Spectra 380 puede seguir mejorando en el futuro, ya que su nuevo diseño modular de ISP aporta una nueva tecnología. Flexibilidad para el proceso de procesamiento de imágenes, lo que abre el potencial para diferentes métodos de procesamiento para píxeles RAW y YUV. dominios.

¿Está entusiasmado con la funcionalidad ampliada de IA en las cámaras? ¿Para qué esperas poder utilizar la visión artificial? ¡Cuéntanos en los comentarios a continuación!