เปิดตัว Qualcomm Spectra 380: ISP รายแรกของโลกที่มี AI ในตัว

click fraud protection

Qualcomm Spectra 380 ก้าวกระโดดครั้งใหญ่ในด้านการถ่ายภาพด้วยคอมพิวเตอร์และ AI ของกล้อง อ่านทั้งหมดเกี่ยวกับการปรับปรุงครั้งใหญ่ที่จะเกิดขึ้นในปีนี้!

เมื่อวานนี้ที่ฮาวายในงาน Snapdragon Technology Summit ที่ทุกคนรอคอยมานาน ควอลคอมม์ สแนปดรากอน 855 ออกสู่ตลาด. ในขณะที่ชิปตัวใหม่นำการเปลี่ยนแปลงที่สำคัญมากมาย (จาก GPS ที่แม่นยำยิ่งขึ้นอย่างมีนัยสำคัญไปจนถึง WiFi เวอร์ชัน 2.4 GHz ใหม่รุ่นแรกใน ทศวรรษถึงการเชื่อมต่อโทรศัพท์มือถือ 5G) การสนทนายังคงกลับมาที่การถ่ายภาพและการปรับปรุงครั้งใหญ่ของ Qualcomm Spectra 380 นำมา

ตามเนื้อผ้า ISP ของกล้องจะจัดการการแปลงสีดิบของกล้องให้เป็นสิ่งที่เหลือ โทรศัพท์สามารถใช้สำหรับวิชันซิสเต็มได้ แต่เนื่องจากการประมวลผลของ AI มีความซับซ้อนมากขึ้น การบูรณาการเข้ากับฮาร์ดแวร์พิเศษจึงกลายเป็นเรื่องสำคัญ วิกฤต. Qualcomm ก้าวแรกสู่สิ่งนี้ด้วย ควอลคอมม์ สเปกตรัม 280การรองรับการลดสัญญาณรบกวนแบบหลายเฟรมและการตรวจจับเชิงลึกโดยตรงใน ISP แต่หนทางยังอีกยาวไกล ในปีนี้ Qualcomm ก้าวกระโดดด้วยการสร้างการเร่งความเร็วการมองเห็นคอมพิวเตอร์ด้วยฮาร์ดแวร์ลงใน Qualcomm Spectra 380 ISP และสร้างสิ่งที่พวกเขาเรียกว่า CV-ISP ตัวแรกของโลก

Qualcomm Spectra 380 จะขจัดปัญหาคอขวดในขั้นตอนการประมวลผลภาพ และส่งผลให้ประหยัดพลังงานได้สูงสุดถึง 4 เท่าจากรุ่นก่อนๆ ด้วยการแสดงวิชันซิสเต็ม ประมวลผลโดยตรงบน ISP เอง ขจัดความจำเป็นในการปลุก CPU, GPU และ HSP สำหรับงาน AI การถ่ายภาพที่ซับซ้อน และปรับปรุง AR ของโปรเซสเซอร์อย่างมาก ความสามารถ

ซึ่งหมายความว่าการตรวจจับเชิงลึกของฮาร์ดแวร์ การจำแนกวัตถุ และการแบ่งส่วนวัตถุทั้งหมดสามารถเกิดขึ้นได้แบบเรียลไทม์ด้วยความละเอียดสูงสุด 4k HDR 60Hz บน Qualcomm Snapdragon 855 สิ่งนี้จะทำให้เรามีวัตถุสดหรือการเปลี่ยนพื้นหลังในวิดีโอแบบเรียลไทม์ ซึ่งเปิดโอกาสใหม่ ๆ ให้กับ แอปพลิเคชั่นขยายความเป็นจริง (XR) ด้วยชิปเซ็ต Qualcomm Snapdragon 855 ทั้งในโทรศัพท์และใน AR ชุดหูฟัง

การปรับปรุง Qualcomm Spectra 380 ไม่ได้หยุดอยู่ที่ AI และ AR เท่านั้น Qualcomm ทุ่มเทความพยายามอย่างมากในการปรับปรุงพื้นที่สีและความสว่าง โดยเพิ่มการรองรับการบันทึกวิดีโอ HDR10+ เต็มรูปแบบ สามารถบันทึกวิดีโอด้วยช่วงไดนามิกที่มากขึ้นและปริภูมิสีที่กว้างขึ้น เพื่อใช้ประโยชน์จากความสามารถของโทรศัพท์สมัยใหม่ได้อย่างเต็มที่ และทีวี

ISP ใหม่ยังนำการเร่งด้วยฮาร์ดแวร์ที่ได้รับการปรับปรุงสำหรับวิดีโอ VP9 และสำหรับรูปแบบภาพ HEVC ที่ใช้ HEVC ซึ่งสามารถเล็กลงได้ 50% กว่ารูปแบบภาพเก่าและนำฟังก์ชันการทำงานที่ขยายออกไป (แม้ว่าเราจะคาดหวังอย่างมากว่าจะมีการเร่งความเร็วด้วยฮาร์ดแวร์เพิ่มเติมก็ตาม ที่ เอวี1 ที่ใช้ AVIF ซึ่งหวังว่าจะสามารถใช้ได้ในปีต่อ ๆ ไป)

Qualcomm Spectra 380 จะสามารถรองรับการถ่ายภาพที่มีความละเอียดสูงกว่าปีที่แล้วด้วย dual 14 บิต ไปป์ไลน์ CV-ISP รองรับการจับภาพ 22MP 30Hz พร้อมกันบนกล้องคู่ และการจับภาพ 48MP 30Hz ด้วยภาพเดียว เซ็นเซอร์ ไปป์ไลน์การอ่านเซ็นเซอร์ที่เร็วขึ้นจะไม่แปลเป็นวิดีโอในกรณีนี้ โดยที่ Qualcomm Spectra 380 รองรับเนทีฟ 720p 480Hz แบบเดียวกับที่ Spectra 280 ทำ

เหนือสิ่งอื่นใด Qualcomm Spectra 380 อาจได้รับการปรับปรุงต่อไปในอนาคต เนื่องจากการออกแบบ ISP แบบโมดูลาร์ใหม่นำมาซึ่งการค้นพบใหม่ ความยืดหยุ่นในขั้นตอนการถ่ายภาพ เปิดศักยภาพสำหรับวิธีการประมวลผลที่แตกต่างกันสำหรับทั้งพิกเซล RAW และ YUV โดเมน

คุณรู้สึกตื่นเต้นกับฟังก์ชัน AI ที่เพิ่มขึ้นในกล้องหรือไม่? คุณหวังว่าจะสามารถใช้วิชันซิสเต็มเพื่ออะไร? บอกเราในความคิดเห็นด้านล่าง!