Οι κάμερες 360 μοιρών έχουν μια νέα υπερδύναμη

Φανταστείτε το Google Street View, μόνο που μπορείτε να περπατάτε σαν να ήταν βιντεοπαιχνίδι. Τώρα φανταστείτε ότι δεν χρειάζεται να περιμένετε να εμφανιστεί το Google Photography επειδή το έχετε κάνει εντελώς μόνοι σας. Το Insta360, ο κορυφαίος κατασκευαστής καμερών 360 μοιρών, έχει πλέον συνεργαστεί με μια startup από 12 άτομα στο Ηνωμένο Βασίλειο που ονομάζεται Splatica για να βοηθήσει τους δημιουργικούς να κάνουν ακριβώς αυτό.

Τον Ιανουάριο, γράψαμε για το Gaussian splatting, μια τεχνολογία που υπόσχεται μια μέρα να επιτρέψει σε οποιονδήποτε να αναδημιουργήσει ψηφιακά μέρη του πραγματικού κόσμου σε φωτορεαλιστικό 3D. Αλλά το Splatica κάνει εκπληκτικά εύκολο να δεσμεύσετε τα χτυπήματα σήμερα — με τίποτα περισσότερο από μια έτοιμη προς χρήση κάμερα 360 μοιρών για καταναλωτές και μια συνδρομητική υπηρεσία που χειρίζεται οτιδήποτε άλλο.

Όταν λέω “εκπληκτικά εύκολο”, το εννοώ – αυτό ήταν το μόνο που έπρεπε να κάνω:

Το δοκίμασα με ένα Insta360 X5 και Antigravity A1 και μπορείτε να δείτε τα αποτελέσματά μου παρακάτω. Αν και σίγουρα δεν είναι τέλειο – τα σημεία μπορεί συχνά να φαίνονται κάπως αιθέρια, σαν να μπαίνεις σε έναν πίνακα ζωγραφικής CG – είμαι πραγματικά πεπεισμένος ότι ορισμένοι δημιουργικοί και εταιρείες θα αγοράσουν κάμερες 360 μοιρών μόνο για αυτόν τον σκοπό. Ο Max Richter, συνιδρυτής του Insta360, μου είπε ότι οι κάμερες της εταιρείας ήταν ήδη περιζήτητες για εικονικές περιηγήσεις σε ακίνητα, αναφορές προόδου κατασκευής και επιθεωρήσεις εγκαταστάσεων — αν ήμουν κτηματομεσίτης, θα αγόραζα μία για αυτήν τη λειτουργία τώρα.

Ακολουθεί η καταγραφή μου με το Antigravity A1 μιας τεράστιας δομής παιχνιδιού στο τοπικό μου πάρκο (χρησιμοποιήστε τα πλήκτρα WASD στο πληκτρολόγιό σας για να πετάξετε και το ποντίκι σας για να κατευθύνετε ή σύρετε τα χειριστήρια στην οθόνη του τηλεφώνου σας):

Και ένα τσέρκι μπάσκετ σε ένα άλλο πάρκο κάτω από το δρόμο. Το Splatica επεξεργάζεται αυτόματα τα περισσότερα άτομα στη σκηνή, έτσι το πάρκο είναι λίγο πιο άδειο από ό,τι ήταν στην πραγματικότητα.

Εάν πατήσετε το κουμπί Path στην επάνω δεξιά γωνία, κάτω από τα “SD” και “HD”, θα δείτε την ακριβή διαδρομή περιέλιξης που πήρα με κάθε κάμερα (και το selfie stick του Insta360 X5) για να δημιουργήσω αυτά τα αποτελέσματα.

Όταν κάνω μια φορά γύρω από το τσέρκι, όπως μπορείτε να δείτε παρακάτω, δεν φαίνεται τόσο καλό. Το Splatica μπορεί να αναδημιουργήσει μόνο αυτό που βλέπει η κάμερά σας, επομένως πρέπει να τραβήξετε από οπουδήποτε θέλετε να «σταθείτε» στον εικονικό κόσμο.

Παρακάτω, προσπάθησα να προσομοιώσω μια βασική επιθεώρηση της γέφυρας στο ίδιο πάρκο, εστιάζοντας σε έναν μόνο πυλώνα κάτω από τη σιδηροδρομική γραμμή προαστιακού BART. Δεν είμαι σίγουρος ότι έχει αρκετές λεπτομέρειες για να ικανοποιήσει πραγματικούς επιθεωρητές ή επιθεωρητές ασφάλειας – ίσως οφείλεται στο ότι η υπερβολική αποφυγή εμποδίων του drone σταμάτησε προσωρινά την πτήση μου.

Αλλά όταν αφιέρωσα περισσότερα από πέντε λεπτά για να τραβήξω φωτογραφίες της αυλής μου με το X5, τα αποτελέσματα ήταν πολύ εκτεταμένα για τη γυναίκα μου και δεν ένιωθα εντελώς άνετα να μοιραστώ ολόκληρη τη σάρωση. Εναλλακτικά, δείτε πώς η Splatica αναδημιουργεί όλα τα αντικείμενα στην αυλή μου δημιουργώντας ένα τρισδιάστατο νέφος σημείων:

Όλες αυτές οι σαρώσεις μπορούν να ληφθούν σε μορφή PLY και USDZ και να συνδεθούν με πραγματικές μετρήσεις: Υπάρχει συνήθως ένα σφάλμα 1 τοις εκατό κάθε 100 εκατοστά, μου είπε ο Andrei Shelomentsev, συνιδρυτής της Splatica, “κάτι που είναι αρκετά καλό για μια σάρωση και κάποια πρόχειρη εξερεύνηση του χώρου”, και λέει ότι οι μετρήσεις της περιοχής μπορούν να γίνουν πιο ακριβείς.

Στην πραγματικότητα, αυτή δεν είναι η πρώτη φορά που προσπαθώ να σαρώσω την αυλή μου σε 3D: το 2021, το έκανα με ένα αυτο-ιπτάμενο drone Skydio. Αλλά εκείνη την εποχή, το Skydio χρέωνε 2.999 $ ετησίως για τη λειτουργία, χωρίς να περιλαμβάνεται ένα drone ή μια υπηρεσία για τη συρραφή εικόνων, ενώ η Splatica ισχυρίζεται ότι η υπηρεσία της τα κάνει όλα αυτόνομα χρησιμοποιώντας κανονικό βίντεο 360 μοιρών.

Οι μακέτες της Splatica είναι πιο ενδιαφέρουσες από τις δικές μου, ειδικά επειδή τώρα προσπαθεί να αποδείξει ότι οι εταιρείες μπορούν να χρησιμοποιήσουν τις υπηρεσίες της για να εκπαιδεύσουν ρομπότ πριν αυτά αναπτυχθούν πραγματικά σε εργοστάσια σε όλο τον κόσμο. Εδώ είναι το εργοστάσιο της Imecar Elektronik στην Αττάλεια της Τουρκίας:

Και για κάτι εντελώς διαφορετικό, εδώ είναι μέρος του Leighton House στο Λονδίνο:

Πώς είναι δυνατόν να περπατάς με μια κάμερα; Ο Shelomentsev μου είπε ότι η εταιρεία του έχει δημιουργήσει μια ειδική έκδοση του SLAM (την τεχνολογία ταυτόχρονης εντοπισμού και χαρτογράφησης που επιτρέπει σε όλα τα είδη ρομπότ, αυτοοδηγούμενα αυτοκίνητα και ακουστικά εικονικής πραγματικότητας να γνωρίζουν τη θέση τους στον τρισδιάστατο χώρο) ειδικά σχεδιασμένη για να δημιουργεί ακριβή σύννεφα σημείων από βίντεο 360 μοιρών. Μπορείτε να σκεφτείτε τα σύννεφα σημείων ως τα «κόκαλα» τρισδιάστατων αντικειμένων που στη συνέχεια βάφονται με χρώμα.

Και ενώ η Splatica λέει ότι μπορεί να λειτουργήσει με οποιαδήποτε κάμερα 360 μοιρών, είναι χρήσιμο οι κάμερες Insta360 και Antigravity να τοποθετούν όλα τα είδη πρόσθετων μεταδεδομένων στα ίδια τα αρχεία βίντεο. «Τα αρχεία περιέχουν όλα όσα χρειαζόμαστε: παραμέτρους παραμόρφωσης φακού, ταχύτητα κλείστρου, δεδομένα επιταχυνσιόμετρου και γυροσκόπιου και GPS – τα οποία μεταδίδονται από την εφαρμογή Insta360 για κινητά απευθείας στην κάμερα κατά τη λήψη», λέει ο Eugene Nikolsky, Διευθύνων Σύμβουλος και συνιδρυτής της Splatica. Ακρη.

_{Επάνω: Το Corridor Crew εξηγεί οπτικά πώς λειτουργούν οι λεκέδες.}

Ο συνδυασμός Insta360/Splatica έχει τους περιορισμούς του. Εάν κάνετε μεγέθυνση σε οποιοδήποτε από τα συμπεριλαμβανόμενα ή συνδεδεμένα παραδείγματα για να δείτε λεπτές λεπτομέρειες, πιθανότατα θα δείτε ελαφρώς ημιδιαφανείς σταγόνες χρώματος αντί για ευανάγνωστες υφές—εξάλλου έτσι γίνονται οι λεκέδες. Η παραδοσιακή φωτογραμμετρία υψηλής ανάλυσης μπορεί να κάνει καλύτερη δουλειά εάν οι επιφάνειες είναι αυτό που σας απασχολεί περισσότερο.

Αλλά αυτό δεν εμποδίζει τα Insta360, Antigravity και Splatica να ξεκινήσουν μια εκστρατεία μάρκετινγκ που ονομάζεται Project Eternal, την οποία οι εταιρείες προωθούν ως μια «παγκόσμια πρωτοβουλία» για τη διατήρηση πολιτιστικών ορόσημων για τις μελλοντικές γενιές. Προσφέρει βραβεία για τα καλύτερα σημεία του Gaussian, 1.000 δωρεάν λήψεις του Splatica (πρώτη φορά, πρώτη εξυπηρέτηση) και ένα πιλοτικό έργο για την έρευνα της Πομπηίας και της εκπληκτικής Civetta di Bagnoregio της Ιταλίας. Επίσης “προσκαλούν δημιουργικούς σε όλο τον κόσμο” να ερευνήσουν τοποθεσίες όπως τα ρωμαϊκά θέατρα και το κορεατικό νησί Jeju.

(Οι εταιρείες δεν μας είπαν πόσα επένδυσαν στο Project Eternal και αναγνώρισαν ότι δεν βοηθούν τους δημιουργούς να λάβουν άδειες για αυτούς τους ιστότοπους — αλλά η Splatica ισχυρίζεται ότι θα διατηρήσει απεριόριστη δημόσια πρόσβαση σε οποιαδήποτε σκηνή που υποβάλλεται στο “Open Heritage Dataset” και η εταιρεία έχει μια αξιοπρεπή πολιτική απορρήτου που καθιστά σαφές ότι το περιεχόμενό σας ανήκει σε εσάς.

Πέρα από αυτό, ο Richter του Insta360 λέει ότι η εταιρεία του έχει ήδη εταιρικούς πελάτες που πειραματίζονται με την 3D ανακατασκευή και τις ψηφιακές διπλές ροές εργασίας στους τομείς των κατασκευών και της διαχείρισης εγκαταστάσεων και ελπίζει να φέρει πλουσιότερα δεδομένα από την κάμερα σε υπηρεσίες 3D ανακατασκευής και να κάνει τη διαδικασία πιο απρόσκοπτη.

Αυτή τη στιγμή, ίσως το μεγαλύτερο εμπόδιο στην είσοδο για τη Splatica είναι ότι η υπηρεσία δεν είναι φθηνή. Η εταιρεία χρεώνει μεταξύ 18 σεντς και 25 σεντς ανά δευτερόλεπτο επεξεργασμένου βίντεο και πρέπει επίσης να πληρώνετε μια μηνιαία συνδρομή. Η εταιρεία πειραματίζεται επί του παρόντος με την τιμολόγηση – την περασμένη εβδομάδα η τιμή ήταν 70 $, 200 $ ή 385 $ ανά μήνα, ανάλογα με το πόση σάρωση χρειάζεστε, ενώ αυτήν την εβδομάδα τα ίδια επίπεδα είναι $50, $150 και $300.

Αλλά αν θέλετε να το δοκιμάσετε, μπορεί να είστε σε θέση να αποκτήσετε έναν από τους 1.000 δωρεάν κουλοχέρηδες. Η Splatica λέει ότι παραιτείται από τα τέλη συνδρομής για τους πρώτους 1.000 χρήστες, οι οποίοι θα πρέπει να μπορούν να μετατρέψουν 10 λεπτά βίντεο 360 μοιρών σε μίνι τρισδιάστατους κόσμους. Μπορείτε επίσης να εξερευνήσετε πάνω από 100 επιπλέον σημεία στη δημόσια γκαλερί Splatica.