O Qualcomm Spectra 380 dá um grande salto em fotografia computacional e IA de câmera. Leia tudo sobre as grandes melhorias que virão este ano!
Ontem no Havaí, no Snapdragon Technology Summit, o tão esperado Qualcomm Snapdragon 855 foi lançado. Embora o novo chip traga várias mudanças substanciais (desde GPS significativamente mais preciso até a primeira nova versão WiFi de 2,4 GHz em um década, para a conectividade celular 5G), a discussão continua voltando à imagem e às enormes melhorias que o Qualcomm Spectra 380 traz.
Tradicionalmente, o ISP da câmera se encarregaria de transformar as saídas de cores brutas da câmera em algo que o resto do telefone pode usar para visão de máquina, mas à medida que o processamento de IA se tornou mais complexo, a integração com hardware especializado tornou-se crítico. A Qualcomm deu os primeiros passos nesse sentido com seu Espectro 280 da Qualcomm, trazendo suporte para redução de ruído multiquadro e detecção de profundidade diretamente no ISP, mas ainda havia um longo caminho a percorrer. Este ano, a Qualcomm dá esse salto, incorporando aceleração de visão computacional de hardware diretamente no ISP Qualcomm Spectra 380 e criando o que eles chamam de primeiro CV-ISP do mundo.
O Qualcomm Spectra 380 removerá gargalos no pipeline de processamento de imagem e resultará em até 4x economia de energia em relação às gerações anteriores, realizando visão de máquina processando diretamente no próprio ISP, eliminando a necessidade de ativar a CPU, GPU e HSP para tarefas complexas de IA de fotografia e melhorando muito o AR do processador capacidades.
Isso significa que a detecção de profundidade de hardware, classificação e segmentação de objetos podem acontecer em tempo real para até 4k HDR 60 Hz no Qualcomm Snapdragon 855. Isto nos dará a substituição de objetos ao vivo ou de fundo em vídeo em tempo real, abrindo novas possibilidades para aplicativos de realidade estendida (XR) com o chipset Qualcomm Snapdragon 855 tanto em telefones quanto em AR fones de ouvido.
As melhorias para o Qualcomm Spectra 380 não param na IA e AR. A Qualcomm trabalhou muito no espaço de cores e nas melhorias de brilho, adicionando suporte para gravação de vídeo HDR10 + completa, tornando-o é possível gravar vídeos com maior faixa dinâmica e espaços de cores mais amplos, para aproveitar ao máximo os recursos dos telefones modernos e televisões.
O novo ISP também traz aceleração de hardware aprimorada para vídeo VP9 e para o formato de imagem HEIF baseado em HEVC, que pode ser 50% menor do que formatos de imagem mais antigos e traz funcionalidade expandida (embora estejamos aguardando fortemente a adição de aceleração de hardware para o AV1 baseado em AVIF, que esperamos estar disponível nos próximos anos)
O Qualcomm Spectra 380 também será capaz de lidar com imagens de resolução mais alta do que os anos anteriores, com seu processador duplo de 14 bits Pipeline CV-ISP com suporte para captura simultânea de 22 MP 30 Hz em câmeras duplas e captura de 48 MP 30 Hz com uma única imagem sensor. O pipeline de leitura mais rápido do sensor não se traduz em vídeo neste caso, no entanto, onde o O Qualcomm Spectra 380 suporta o mesmo 720p 480 Hz nativo (sem usar cache no sensor) que o Spectra 280 fizeram.
O melhor de tudo é que o Qualcomm Spectra 380 pode continuar a melhorar no futuro, já que seu novo design modular de ISP traz uma nova tecnologia flexibilidade para o pipeline de imagens, abrindo o potencial para diferentes métodos de processamento para pixels RAW e YUV domínios.
Você está animado com a funcionalidade expandida de IA nas câmeras? Para que você espera poder usar a visão mecânica? Conte-nos nos comentários abaixo!