Νωρίτερα αυτό το μήνα, κατά τη διάρκεια του ετήσιου συνεδρίου προγραμματιστών της Apple, WWDC 2022, η εταιρεία έδωσε στους προγραμματιστές την πρώτη ματιά στις βελτιώσεις που έρχονται στο κιτ εργαλείων ARKit 6 της Apple για τη δημιουργία εφαρμογών AR σε συσκευές iOS.
Αν και η Apple δεν έχει ακόμη αποκαλύψει (ή ακόμη και επιβεβαιώσει) την ύπαρξη ενός ακουστικού AR, η πιο ξεκάθαρη ένδειξη ότι η εταιρεία είναι απολύτως σοβαρή για το AR είναι το ARKit, το κιτ εργαλείων προγραμματιστών για τη δημιουργία εφαρμογών AR σε συσκευές iOS που η Apple προχωρά από το 2017.
Στο WWDC 2022, η Apple αποκάλυψε την πιο πρόσφατη έκδοση, το ARKit 6, η οποία φέρνει βελτιώσεις στις βασικές δυνατότητες, ώστε οι προγραμματιστές να μπορούν να δημιουργήσουν καλύτερες εφαρμογές AR για iPhone και iPad (και τελικά ακουστικά… πιθανώς).
Κατά τη διάρκεια της Συνεδρία προγραμματιστή "Discover ARKit 6" στο WWDC 2022, ο Μηχανικός της Apple ARKit Christian Lipski, έκανε μια επισκόπηση της συνέχειας.
Καλύτερη λήψη κίνησης
Το ARKit περιλαμβάνει μια λειτουργία MotionCapture που παρακολουθεί τους ανθρώπους στο πλαίσιο του βίντεο, δίνοντας στους προγραμματιστές έναν «σκελετό» που υπολογίζει τη θέση του κεφαλιού και των άκρων του ατόμου. Αυτό επιτρέπει στους προγραμματιστές να δημιουργούν εφαρμογές που επικαλύπτουν επαυξημένα πράγματα στο άτομο ή τα μετακινούν σε σχέση με το άτομο (μπορεί επίσης να χρησιμοποιηθεί για απόφραξη για να τοποθετήσετε επαυξημένο περιεχόμενο πίσω από κάποιον για να το ενσωματώσετε πιο ρεαλιστικά στη σκηνή).
Στο ARKit 6, ο Lipski λέει ότι η λειτουργία λαμβάνει μια «ολόκληρη σειρά ενημερώσεων», συμπεριλαμβανομένης της βελτιωμένης παρακολούθησης 2D σκελετών που υπολογίζουν τώρα τη θέση του αριστερού και του δεξιού αυτιού του θέματος (που σίγουρα θα είναι χρήσιμο για φίλτρα προσώπου, δοκιμή γυαλιών με AR, και παρόμοιες λειτουργίες που περιλαμβάνουν το κεφάλι).
Όσον αφορά τους τρισδιάστατους σκελετούς, οι οποίοι παρέχουν μια εκτίμηση πόζας με βάθος, η Apple υπόσχεται καλύτερη παρακολούθηση με λιγότερα jitter, μεγαλύτερη χρονική συνέπεια και μεγαλύτερη στιβαρότητα όταν ο χρήστης αποφράσσεται από την άκρη της κάμερας ή άλλα αντικείμενα (αν και ορισμένες από αυτές τις βελτιώσεις είναι διαθέσιμο μόνο σε iPhone 3 και νεότερες εκδόσεις).
Βελτιώσεις πρόσβασης κάμερας
Το ARKit 6 δίνει στους προγραμματιστές πολύ περισσότερο έλεγχο της κάμερας της συσκευής ενώ χρησιμοποιείται με μια εφαρμογή AR για παρακολούθηση.
Οι προγραμματιστές μπορούν πλέον να έχουν πρόσβαση στα εισερχόμενα καρέ σε πραγματικό χρόνο έως και 4K στα 30 FPS στο iPhone 11 και νεότερες εκδόσεις και στο πιο πρόσφατο iPad Pro (M1). Η προηγούμενη λειτουργία, η οποία χρησιμοποιεί χαμηλότερη ανάλυση αλλά υψηλότερο ρυθμό καρέ (60 FPS), εξακολουθεί να είναι διαθέσιμη στους προγραμματιστές. Ο Lipski λέει ότι οι προγραμματιστές θα πρέπει να εξετάσουν προσεκτικά ποια λειτουργία θα χρησιμοποιήσουν. Η λειτουργία 4K μπορεί να είναι καλύτερη για εφαρμογές που εστιάζουν στην προεπισκόπηση ή την εγγραφή βίντεο (όπως μια εικονική εφαρμογή παραγωγής), αλλά η λειτουργία χαμηλότερης ανάλυσης 60 FPS μπορεί να είναι καλύτερη για εφαρμογές που επωφελούνται από την ανταπόκριση, όπως παιχνίδια.
Παρόμοια με υψηλότερη ανάλυση βίντεο κατά τη διάρκεια μιας εφαρμογής AR, οι προγραμματιστές μπορούν πλέον να τραβούν φωτογραφίες πλήρους ανάλυσης ακόμη και όταν μια εφαρμογή AR χρησιμοποιεί ενεργά την κάμερα. Αυτό σημαίνει ότι μπορούν να βγάλουν μια εικόνα 12 MP (σε iPhone 13 ούτως ή άλλως) για να αποθηκευτεί ή να χρησιμοποιηθεί αλλού. Αυτό θα μπορούσε να είναι εξαιρετικό για μια εφαρμογή AR όπου η λήψη φωτογραφιών αποτελεί μέρος της εμπειρίας. Για παράδειγμα, λέει ο Lipski, μια εφαρμογή όπου οι χρήστες καθοδηγούνται στη λήψη φωτογραφιών ενός αντικειμένου για να μετατραπούν αργότερα σε ένα τρισδιάστατο μοντέλο με φωτογραμμετρία.
Το ARKit 6 δίνει επίσης στους προγραμματιστές περισσότερο έλεγχο της κάμερας ενώ χρησιμοποιείται από μια εφαρμογή AR. Οι προγραμματιστές μπορούν να προσαρμόσουν πράγματα όπως η ισορροπία λευκού, η φωτεινότητα και η εστίαση όπως απαιτείται, και μπορούν να διαβάσουν δεδομένα EXIF από κάθε εισερχόμενο καρέ.
Περισσότερα Location Anchor… Τοποθεσίες
Το ARKit περιλαμβάνει LocationAnchors που μπορούν να παρέχουν παρακολούθηση σε επίπεδο δρόμου για AR σε επιλεγμένες πόλεις (για παράδειγμα, για να κάνετε οδηγίες επαυξημένης πραγματικότητας βήμα προς βήμα). Η Apple επεκτείνει αυτήν τη λειτουργία σε περισσότερες πόλεις, συμπεριλαμβανομένων τώρα του Βανκούβερ, του Τορόντο και του Μόντρεαλ στον Καναδά. Φουκουόκα, Χιροσίμα, Οσάκα, Κιότο, Ναγκόγια, Γιοκοχάμα και Τόκιο στην Ιαπωνία. και τη Σιγκαπούρη.
Αργότερα φέτος η λειτουργία θα επεκταθεί περαιτέρω στο Ώκλαντ της Νέας Ζηλανδίας. Tel Aviv-Yafo, Ισραήλ; και Παρίσι, Γαλλία.
Άγκυρες αεροπλάνων
Τα Plane Anchors είναι ένα εργαλείο για την παρακολούθηση επίπεδων αντικειμένων όπως τραπέζια, δάπεδα και τοίχους κατά τη διάρκεια μιας περιόδου λειτουργίας AR. Πριν από το ARKit 6, η προέλευση ενός Plane Anchor θα ενημερωνόταν καθώς ανακαλύφθηκε μεγαλύτερο μέρος του αεροπλάνου (για παράδειγμα, μετακινώντας τη συσκευή για να αποκαλύψει περισσότερο τραπέζι από ό,τι είδε η κάμερα προηγουμένως). Αυτό θα μπορούσε να δυσκολέψει τη διατήρηση των επαυξημένων αντικειμένων κλειδωμένων στη θέση τους σε ένα αεροπλάνο, εάν η αρχή περιστρεφόταν μετά την πρώτη τοποθέτηση. Με το ARKit 6, η περιστροφή της αρχής παραμένει στατική ανεξάρτητα από το πώς μπορεί να αλλάξει το σχήμα του αεροπλάνου κατά τη διάρκεια της συνεδρίας.
- - - - -
Το ARKit 6 θα κυκλοφορήσει με την ενημέρωση iOS 16, η οποία είναι διαθέσιμη τώρα σε beta για προγραμματιστές και αναμένεται να κυκλοφορήσει στο κοινό αυτό το Φθινόπωρο.
