Qualcomm Spectra 380 출시: AI가 통합된 세계 최초의 ISP

Qualcomm Spectra 380은 컴퓨팅 사진 및 카메라 AI 분야에서 큰 도약을 이루었습니다. 올해 다가올 대규모 개선 사항에 대해 모두 읽어보세요!

어제 하와이에서 오랫동안 기다려온 Snapdragon Technology Summit이 있었습니다. 퀄컴 스냅드래곤 855 발사되었다. 새로운 칩은 훨씬 더 정확한 GPS부터 최초의 새로운 2.4GHz WiFi 버전까지 다양한 실질적인 변화를 가져왔습니다. 5G 셀룰러 연결에 대한 논의는 계속해서 이미징과 Qualcomm Spectra 380이 제공하는 엄청난 개선 사항에 대해 다시 논의되고 있습니다. 가져옵니다.

전통적으로 카메라의 ISP는 카메라의 원시 색상 출력을 나머지 색상 출력으로 변환하는 작업을 처리했습니다. 휴대폰은 머신 비전에 사용될 수 있지만 AI 처리가 더욱 복잡해지면서 전문 하드웨어와의 통합이 가능해졌습니다. 비판적인. Qualcomm은 이를 위한 첫 번째 조치를 취했습니다. 퀄컴 스펙트럼 280, 다중 프레임 노이즈 감소 및 깊이 감지를 ISP에 직접 베이킹 지원하지만 아직 갈 길이 멀었습니다. 올해 Qualcomm은 Qualcomm Spectra 380 ISP에 하드웨어 컴퓨터 비전 가속기를 구축하고 세계 최초의 CV-ISP를 만드는 등 도약했습니다.

Qualcomm Spectra 380은 이미지 처리 파이프라인의 병목 현상을 제거하고 머신 비전을 수행하여 이전 세대에 비해 최대 4배의 전력 절감 효과를 제공합니다. ISP 자체에서 바로 처리하여 복잡한 사진 촬영 AI 작업을 위해 CPU, GPU 및 HSP를 깨울 필요가 없으며 프로세서의 AR이 크게 향상됩니다. 능력.

이는 하드웨어 깊이 감지, 객체 분류 및 객체 분할이 모두 Qualcomm Snapdragon 855에서 최대 4k HDR 60Hz에 대해 실시간으로 발생할 수 있음을 의미합니다. 이를 통해 실시간 비디오에서 실제 개체나 배경을 교체할 수 있어 새로운 가능성이 열리게 됩니다. 휴대폰과 AR 모두에서 Qualcomm Snapdragon 855 칩셋을 사용하는 확장 현실(XR) 애플리케이션 헤드셋.

Qualcomm Spectra 380의 개선은 AI와 AR에서 끝나지 않습니다. Qualcomm은 색 공간과 밝기 개선에 많은 노력을 기울여 풀 HDR10+ 비디오 녹화에 대한 지원을 추가했습니다. 최신 휴대폰의 기능을 최대한 활용하기 위해 더 넓은 다이내믹 레인지와 더 넓은 색 공간으로 비디오를 녹화할 수 있습니다. 그리고 TV.

새로운 ISP는 VP9 비디오와 50% 더 작은 HEVC 기반 HEIF 이미지 형식에 대한 향상된 하드웨어 가속도 제공합니다. 이전 이미지 형식보다 확장된 기능을 제공합니다. 그만큼 AV1 향후 몇 년 내에 제공될 AVIF 기반)

Qualcomm Spectra 380은 또한 듀얼 14비트 기술을 통해 이전보다 더 높은 해상도의 이미징을 처리할 수 있습니다. 듀얼 카메라에서 22MP 30Hz 동시 캡처 및 단일 이미지로 48MP 30Hz 캡처를 지원하는 CV-ISP 파이프라인 감지기. 그러나 이 경우에는 더 빠른 센서 읽기 파이프라인이 비디오로 변환되지 않습니다. Qualcomm Spectra 380은 Spectra와 동일한 기본 720p 480Hz(온센서 캐시를 사용하지 않음)를 지원합니다. 280명이 그랬다.

무엇보다도 Qualcomm Spectra 380은 새로운 모듈식 ISP 설계로 새로운 발견을 가져오기 때문에 앞으로도 계속해서 개선될 수 있습니다. 이미징 파이프라인에 유연성을 부여하여 RAW 및 YUV 픽셀 모두에 대해 다양한 처리 방법의 가능성을 열어줍니다. 도메인.

카메라의 확장된 AI 기능에 대해 기대가 되시나요? 머신 비전을 어떤 용도로 사용할 수 있기를 바라시나요? 아래 댓글로 알려주세요!