Qualcomm Spectra 380 mengambil lompatan besar dalam fotografi komputasi dan AI kamera. Baca semua tentang perbaikan besar-besaran yang akan terjadi tahun ini!
Kemarin di Hawaii pada KTT Teknologi Snapdragon, hal yang sudah lama dinantikan QualcommSnapdragon 855 diluncurkan. Sementara chip baru ini membawa berbagai perubahan besar (dari GPS yang jauh lebih akurat hingga versi WiFi 2,4 GHz baru yang pertama dalam a dekade, hingga konektivitas seluler 5G), diskusi terus kembali ke pencitraan dan peningkatan besar-besaran yang dilakukan Qualcomm Spectra 380 membawa.
Secara tradisional, ISP kamera akan menangani transformasi keluaran warna mentah kamera menjadi sesuatu yang berbeda dari warna lainnya telepon dapat digunakan untuk visi mesin, tetapi karena pemrosesan AI menjadi lebih kompleks, integrasi dengan perangkat keras khusus pun menjadi lebih rumit kritis. Qualcomm mengambil langkah pertama menuju hal ini dengan miliknya Qualcomm Spektra 280, memasukkan dukungan untuk pengurangan noise multi-frame dan penginderaan kedalaman langsung ke ISP, namun perjalanan masih panjang. Tahun ini Qualcomm melakukan lompatan tersebut, dengan membangun akselerasi visi komputer perangkat keras langsung ke Qualcomm Spectra 380 ISP, dan menciptakan apa yang mereka sebut sebagai CV-ISP pertama di dunia.
Qualcomm Spectra 380 akan menghilangkan hambatan dalam jalur pemrosesan gambar dan menghasilkan penghematan daya hingga 4x dibandingkan generasi sebelumnya dengan melakukan visi mesin pemrosesan langsung di ISP itu sendiri, menghilangkan kebutuhan untuk membangunkan CPU, GPU, dan HSP untuk tugas-tugas AI fotografi yang rumit, dan sangat meningkatkan AR prosesor kemampuan.
Artinya, penginderaan kedalaman perangkat keras, klasifikasi objek, dan segmentasi objek, semuanya dapat terjadi secara real-time hingga 4k HDR 60Hz pada Qualcomm Snapdragon 855. Ini akan memberi kita penggantian objek atau latar belakang langsung dalam video real-time, membuka kemungkinan baru aplikasi extended reality (XR) dengan chipset Qualcomm Snapdragon 855 baik di ponsel maupun AR headset.
Peningkatan pada Qualcomm Spectra 380 tidak berhenti pada AI dan AR saja. Qualcomm berupaya keras dalam ruang warna dan peningkatan kecerahan, menambahkan dukungan untuk perekaman video HDR10+ penuh, sehingga berhasil memungkinkan untuk merekam video dengan rentang dinamis yang lebih besar dan ruang warna yang lebih luas, untuk memanfaatkan sepenuhnya kemampuan ponsel modern dan TV.
ISP baru ini juga menghadirkan peningkatan akselerasi perangkat keras untuk video VP9 dan untuk format gambar HEIF berbasis HEVC yang bisa 50% lebih kecil dibandingkan format gambar lama dan menghadirkan fungsionalitas yang diperluas (walaupun kami sangat mengantisipasi penambahan akselerasi perangkat keras untuk itu AV1 berbasis AVIF, yang diharapkan akan tersedia di tahun-tahun mendatang)
Qualcomm Spectra 380 juga akan mampu menangani pencitraan resolusi lebih tinggi dibandingkan tahun-tahun sebelumnya, dengan dual 14-bit Saluran CV-ISP mendukung pengambilan gambar bersamaan 22MP 30Hz pada kamera ganda, dan pengambilan gambar 48MP 30Hz dengan satu gambar sensor. Namun, pipeline pembacaan sensor yang lebih cepat tidak diterjemahkan ke dalam video Qualcomm Spectra 380 mendukung 720p 480Hz asli yang sama (tanpa menggunakan cache pada sensor) seperti Spectra 280 melakukannya.
Yang terbaik dari semuanya, Qualcomm Spectra 380 mungkin terus mengalami peningkatan di masa depan, karena desain ISP modularnya yang baru menghadirkan terobosan baru. fleksibilitas pada jalur pencitraan, membuka potensi metode pemrosesan yang berbeda untuk piksel RAW dan YUV domain.
Apakah Anda bersemangat untuk memperluas fungsionalitas AI di kamera? Apa yang Anda harapkan bisa menggunakan visi mesin? Beritahu kami di komentar di bawah!