გამოვიდა Qualcomm Spectra 380: მსოფლიოში პირველი ISP ინტეგრირებული AI

click fraud protection

Qualcomm Spectra 380 წინ გადადგმული ნაბიჯია გამოთვლითი ფოტოგრაფიისა და კამერის ხელოვნური ინტელექტის სფეროში. წაიკითხეთ ყველაფერი ამ წელს მომავალი უზარმაზარი გაუმჯობესების შესახებ!

გუშინ ჰავაიზე Snapdragon Technology Summit-ზე დიდი ხნის ნანატრი Qualcomm Snapdragon 855 ამოქმედდა. მიუხედავად იმისა, რომ ახალ ჩიპს მოაქვს სხვადასხვა არსებითი ცვლილებები (მნიშვნელოვნად უფრო ზუსტი GPS-დან პირველ ახალ 2.4 გჰც WiFi ვერსიამდე ათწლეულის განმავლობაში, 5G ფიჭურ დაკავშირებამდე), დისკუსია კვლავ უბრუნდება გამოსახულებას და Qualcomm Spectra 380-ის უზარმაზარ გაუმჯობესებას მოაქვს.

ტრადიციულად კამერის ISP ამუშავებს კამერის ნედლეული ფერის გამოსავლების გარდაქმნას ისეთად, რასაც დანარჩენი ტელეფონის გამოყენება შესაძლებელია მანქანური ხედვისთვის, მაგრამ რაც AI დამუშავება უფრო რთული გახდა, ინტეგრაცია სპეციალიზირებულ აპარატურასთან გახდა კრიტიკული. Qualcomm-მა ამ მიმართულებით პირველი ნაბიჯები გადადგა თავისით Qualcomm Spectra 280, საცხობი მხარდაჭერა მრავალ კადრის ხმაურის შემცირებისთვის და სიღრმის ამოცნობისთვის პირდაპირ ISP-ში, მაგრამ ჯერ კიდევ დიდი გზა იყო გასავლელი. წელს Qualcomm იღებს ამ ნახტომს, აშენებს კომპიუტერული ხედვის აჩქარებას Qualcomm Spectra 380 ISP-ში და ქმნის იმას, რასაც ისინი უწოდებენ მსოფლიოში პირველ CV-ISP-ს.

Qualcomm Spectra 380 ამოიღებს შეფერხებებს გამოსახულების დამუშავების მილსადენში და გამოიწვევს ენერგიის 4-ჯერ დაზოგვას წინა თაობებთან შედარებით მანქანური ხედვის შესრულებით. დამუშავება პირდაპირ ISP-ზე, მოხსნის CPU-ს, GPU-ს და HSP-ის გაღვიძების აუცილებლობას კომპლექსური ფოტოგრაფიის AI ამოცანებისთვის და მნიშვნელოვნად აუმჯობესებს პროცესორის AR-ს. შესაძლებლობები.

ეს ნიშნავს, რომ ტექნიკის სიღრმის ამოცნობა, ობიექტების კლასიფიკაცია და ობიექტების სეგმენტაცია შეიძლება მოხდეს რეალურ დროში 4k HDR 60Hz-მდე Qualcomm Snapdragon 855-ზე. ეს მოგვცემს ცოცხალი ობიექტის ან ფონის ჩანაცვლებას რეალურ დროში ვიდეოში, გახსნის ახალ შესაძლებლობებს გაფართოებული რეალობის (XR) აპლიკაციები Qualcomm Snapdragon 855 ჩიპსეტით როგორც ტელეფონებში, ასევე AR-ში ყურსასმენები.

Qualcomm Spectra 380-ის გაუმჯობესებები არ ჩერდება AI-სა და AR-ზე. Qualcomm-მა დიდი შრომა ჩადო ფერთა სივრცისა და სიკაშკაშის გაუმჯობესებაში, დაამატა მხარდაჭერა სრული HDR10+ ვიდეოს ჩაწერისთვის, რაც მას გახდის შესაძლებელია ვიდეოების ჩაწერა უფრო დიდი დინამიური დიაპაზონით და უფრო ფართო ფერის სივრცეებით, რათა სრულად ისარგებლოს თანამედროვე ტელეფონების შესაძლებლობებით და ტელევიზორები.

ახალი ISP ასევე მოაქვს გაუმჯობესებული ტექნიკის აჩქარება VP9 ვიდეოსთვის და HEVC დაფუძნებული HEIF გამოსახულების ფორმატისთვის, რომელიც შეიძლება იყოს 50%-ით პატარა. ვიდრე ძველი გამოსახულების ფორმატები და მოაქვს გაფართოებული ფუნქციონირება (თუმცა ჩვენ ძალიან ველოდებით ტექნიკის აჩქარების დამატებას The AV1 დაფუძნებული AVIF, რომელიც იმედია ხელმისაწვდომი იქნება მომავალ წლებში)

Qualcomm Spectra 380 ასევე შეძლებს გაუმკლავდეს უფრო მაღალი გარჩევადობის გამოსახულებას, ვიდრე წინა წლებში, თავისი ორმაგი 14-ბიტიანი. CV-ISP მილსადენი, რომელიც მხარს უჭერს 22MP 30Hz ერთდროულად გადაღებას ორმაგ კამერებზე და 48MP 30Hz გადაღებას ერთი სურათით სენსორი. უფრო სწრაფი სენსორის წაკითხვის მილსადენი ამ შემთხვევაში არ ითარგმნება ვიდეოზე, თუმცა, სადაც Qualcomm Spectra 380 მხარს უჭერს იგივე 720p 480Hz-ს (სენსორული ქეშის გამოყენების გარეშე), რასაც Spectra 280 გააკეთა.

რაც მთავარია, Qualcomm Spectra 380 შეიძლება გააგრძელოს გაუმჯობესება მომავალში, რადგან მისი ახალი მოდულური ISP დიზაინი ახალ აღმოჩენებს მოაქვს. გამოსახულების მილსადენის მოქნილობა, რომელიც ხსნის დამუშავების სხვადასხვა მეთოდებს როგორც RAW, ასევე YUV პიქსელებისთვის დომენები.

აღფრთოვანებული ხართ კამერებში AI-ის გაფართოებული ფუნქციით? რისთვის გაქვთ იმედი, რომ შეძლებთ მანქანური ხედვის გამოყენებას? გვითხარით ქვემოთ მოცემულ კომენტარებში!