Το Qualcomm Spectra 380 κάνει ένα τεράστιο άλμα προς τα εμπρός στην υπολογιστική φωτογραφία και την τεχνητή νοημοσύνη της κάμερας. Διαβάστε τα πάντα για τις τεράστιες βελτιώσεις που έρχονται φέτος!
Χθες στη Χαβάη στο Snapdragon Technology Summit, το πολυαναμενόμενο Qualcomm Snapdragon 855 εκτοξεύτηκε. Ενώ το νέο τσιπ φέρνει διάφορες ουσιαστικές αλλαγές (από πολύ πιο ακριβές GPS έως την πρώτη νέα έκδοση WiFi 2,4 GHz σε δεκαετία, στη συνδεσιμότητα 5G κινητής τηλεφωνίας), η συζήτηση συνεχίζει να επιστρέφει στην απεικόνιση και τις τεράστιες βελτιώσεις που έχει το Qualcomm Spectra 380 φέρνει.
Παραδοσιακά, ο ISP της κάμερας χειριζόταν τη μετατροπή των εξόδων ακατέργαστων χρωμάτων της κάμερας σε κάτι που το υπόλοιπο το τηλέφωνο μπορεί να χρησιμοποιηθεί για μηχανική όραση, αλλά καθώς η επεξεργασία τεχνητής νοημοσύνης έχει γίνει πιο περίπλοκη, η ενσωμάτωση με εξειδικευμένο υλικό έχει γίνει κρίσιμος. Η Qualcomm έκανε τα πρώτα βήματα προς αυτό με τους Qualcomm Spectra 280, υποστήριξη ψησίματος για μείωση θορύβου πολλαπλών καρέ και ανίχνευση βάθους απευθείας στον ISP, αλλά υπήρχε ακόμη πολύς δρόμος. Φέτος η Qualcomm κάνει αυτό το άλμα, δημιουργώντας την επιτάχυνση όρασης του υπολογιστή μέσω υλικού στον ISP Qualcomm Spectra 380 και δημιουργώντας αυτό που αποκαλούν το πρώτο CV-ISP στον κόσμο.
Το Qualcomm Spectra 380 θα αφαιρέσει τα σημεία συμφόρησης στον αγωγό επεξεργασίας εικόνας και θα έχει ως αποτέλεσμα έως και 4 φορές εξοικονόμηση ενέργειας σε σχέση με τις προηγούμενες γενιές, εκτελώντας μηχανική όραση επεξεργασία απευθείας στον ίδιο τον ISP, καταργώντας την ανάγκη αφύπνισης της CPU, της GPU και του HSP για πολύπλοκες εργασίες AI φωτογραφίας και βελτιώνοντας σημαντικά το AR του επεξεργαστή δυνατότητες.
Αυτό σημαίνει ότι η ανίχνευση βάθους υλικού, η ταξινόμηση αντικειμένων και η τμηματοποίηση αντικειμένων μπορούν να συμβούν σε πραγματικό χρόνο για έως και 4k HDR 60Hz στον Qualcomm Snapdragon 855. Αυτό θα μας δώσει την αντικατάσταση ζωντανού αντικειμένου ή φόντου σε βίντεο σε πραγματικό χρόνο, ανοίγοντας νέες δυνατότητες εφαρμογές εκτεταμένης πραγματικότητας (XR) με το chipset Qualcomm Snapdragon 855 τόσο σε τηλέφωνα όσο και σε AR ακουστικά.
Ωστόσο, οι βελτιώσεις για το Qualcomm Spectra 380 δεν σταματούν στο AI και το AR. Η Qualcomm έκανε πολλή δουλειά στη βελτίωση του χρωματικού χώρου και της φωτεινότητας, προσθέτοντας υποστήριξη για πλήρη εγγραφή βίντεο HDR10+, καθιστώντας την είναι δυνατή η εγγραφή βίντεο με μεγαλύτερο δυναμικό εύρος και ευρύτερους χρωματικούς χώρους, για να αξιοποιήσετε πλήρως τις δυνατότητες των σύγχρονων τηλεφώνων και τηλεοράσεις.
Ο νέος ISP φέρνει επίσης βελτιωμένη επιτάχυνση υλικού για βίντεο VP9 και για τη μορφή εικόνας HEIF που βασίζεται σε HEVC, η οποία μπορεί να είναι 50% μικρότερη από παλαιότερες μορφές εικόνας και προσφέρει διευρυμένη λειτουργικότητα (αν και αναμένουμε ιδιαίτερα την προσθήκη επιτάχυνσης υλικού για ο AV1 με βάση το AVIF, το οποίο ελπίζουμε ότι θα είναι διαθέσιμο τα επόμενα χρόνια)
Το Qualcomm Spectra 380 θα μπορεί επίσης να χειρίζεται εικόνες υψηλότερης ανάλυσης από τα προηγούμενα χρόνια, με το διπλό 14-bit Διοχέτευση CV-ISP που υποστηρίζει ταυτόχρονη λήψη 22MP 30Hz σε διπλές κάμερες και λήψη 48MP 30Hz με μία μόνο εικόνα αισθητήρας. Ο ταχύτερος αγωγός ανάγνωσης αισθητήρα δεν μεταφράζεται σε βίντεο σε αυτήν την περίπτωση, ωστόσο, όπου το Το Qualcomm Spectra 380 υποστηρίζει το ίδιο εγγενές 720p 480Hz (χωρίς τη χρήση προσωρινής μνήμης στον αισθητήρα) που το Spectra 280 έκανε.
Το καλύτερο από όλα, το Qualcomm Spectra 380 μπορεί να συνεχίσει να βελτιώνεται στο μέλλον, καθώς ο νέος αρθρωτός σχεδιασμός του ISP φέρνει ένα νέο ευελιξία στον αγωγό απεικόνισης, ανοίγοντας τη δυνατότητα για διαφορετικές μεθόδους επεξεργασίας τόσο για RAW όσο και για YUV pixel τομείς.
Είστε ενθουσιασμένοι για τη διευρυμένη λειτουργικότητα AI στις κάμερες; Σε τι ελπίζετε να μπορέσετε να χρησιμοποιήσετε την μηχανική όραση; Πείτε μας στα σχόλια παρακάτω!