Αρθρο

Εδώ είναι γιατί το τσιπ Neural Core του Pixel 4 θα μπορούσε να είναι ένα παιχνίδι αλλαγής φωτογραφιών

protection click fraud

Υπάρχει ένας λόγος για τον οποίο Pixel 3 έχει επαινεθεί ως το καλύτερο τηλέφωνο με κάμερα. Η Google χρησιμοποιεί αλγόριθμους λογισμικού εντός του πακέτου HDR + για την επεξεργασία εικονοστοιχείων και όταν συνδυάζεται με λίγο της μηχανικής εκμάθησης, μερικές πραγματικά εντυπωσιακές φωτογραφίες μπορούν να προέρχονται από ένα τηλέφωνο που μπορεί να έχει τυπικό πρόβλημα σκεύη, εξαρτήματα.

Για να βοηθήσει στην επεξεργασία αυτών των αλγορίθμων, η Google χρησιμοποίησε έναν εξειδικευμένο επεξεργαστή που ονομάζεται Pixel Visual Core, ένα τσιπ που είδαμε για πρώτη φορά το 2017 με το Pixel 2. Φέτος, φαίνεται ότι η Google έχει αντικατέστησε το Pixel VIsual Core με κάτι που ονομάζεται Pixel Neural Core.

Η Google μπορεί να χρησιμοποιεί τεχνικές νευρικού δικτύου για να κάνει τις φωτογραφίες ακόμα καλύτερες στο Pixel 4.

Το πρωτότυπο Pixel Visual Core σχεδιάστηκε για να βοηθήσει τους αλγόριθμους που χρησιμοποιούνται από την επεξεργασία εικόνας HDR + της Google, οι οποίοι κάνουν τις φωτογραφίες που τραβήχτηκαν με τα Pixel 2 και Pixel 3 να φαίνονται τόσο υπέροχες. Χρησιμοποίησε κάποιο προγραμματισμό μηχανικής εκμάθησης και αυτό που ονομάζεται υπολογιστική φωτογραφία για να συμπληρώσει έξυπνα τα μέρη μιας φωτογραφίας που δεν ήταν αρκετά τέλεια. Το αποτέλεσμα ήταν πολύ καλό. Επιτρέπει σε ένα τηλέφωνο με έναν αισθητήρα κάμερας εκτός του ραφιού να τραβά φωτογραφίες όσο το δυνατόν καλύτερα ή καλύτερα από οποιοδήποτε άλλο διαθέσιμο τηλέφωνο.

Η Verizon προσφέρει το Pixel 4a με μόλις $ 10 / μήνα σε νέες απεριόριστες γραμμές

Εάν το Pixel Neural Core είναι αυτό που πιστεύουμε ότι είναι, το Pixel 4 για άλλη μια φορά θα αγωνιστεί για την πρώτη θέση όσον αφορά τη φωτογραφία smartphone. Εδώ γιατί.

Νευρωνικά δίκτυα

Φαίνεται ότι η Google χρησιμοποιεί ένα τσιπ μοντελοποιημένο σύμφωνα με μια τεχνική νευρωνικού δικτύου για τη βελτίωση της επεξεργασίας εικόνας στο τηλέφωνο Pixel για το 2019. Ένα νευρωνικό δίκτυο είναι κάτι που ίσως έχετε δει να αναφέρει μια ή δύο φορές, αλλά η ιδέα δεν εξηγείται πολύ συχνά. Αντ 'αυτού, μπορεί να μοιάζει με κάποιο mumbo-jumbo υπολογιστή σε επίπεδο Google που μοιάζει με μαγεία. Δεν είναι, και η ιδέα πίσω από ένα νευρικό δίκτυο είναι πραγματικά πολύ εύκολο να τυλίξετε το κεφάλι σας.

Τα νευρικά δίκτυα συλλέγουν και επεξεργάζονται πληροφορίες με τρόπο που μοιάζει με τον ανθρώπινο εγκέφαλο.

Τα νευρικά δίκτυα είναι ομάδες αλγορίθμων βάσει του ανθρώπινου εγκεφάλου. Όχι πώς φαίνεται ή λειτουργεί ο εγκέφαλος, αλλά πώς επεξεργάζεται πληροφορίες. Ένα νευρωνικό δίκτυο λαμβάνει αισθητήρια δεδομένα μέσω αυτού που λέγεται αντίληψη μηχανής - δεδομένα που συλλέγονται και μεταφέρονται μέσω εξωτερικών αισθητήρων, όπως ένας αισθητήρας κάμερας - και αναγνωρίζει μοτίβα.

Αυτά τα μοτίβα είναι αριθμοί που ονομάζονται διανύσματα. Όλα τα εξωτερικά δεδομένα από τον "πραγματικό" κόσμο, συμπεριλαμβανομένων εικόνων, ήχων και κειμένου, μεταφράζονται σε έναν φορέα και ταξινομούνται και καταλογογραφούνται ως σύνολα δεδομένων. Σκεφτείτε ένα νευρωνικό δίκτυο ως ένα επιπλέον επίπεδο πάνω από πράγματα που είναι αποθηκευμένα σε υπολογιστή ή τηλέφωνο και σε αυτό το επίπεδο περιέχει δεδομένα σχετικά με το τι σημαίνει όλα - πώς φαίνεται, πώς ακούγεται, τι λέει και πότε συνέβη. Μόλις δημιουργηθεί ένας κατάλογος, νέα δεδομένα μπορούν να ταξινομηθούν και να συγκριθούν με αυτόν.

Ένα πραγματικό παράδειγμα το βοηθά όλα να έχουν πιο νόημα. Το NVIDIA κάνει επεξεργαστές που είναι πολύ καλοί στη λειτουργία νευρωνικών δικτύων. Η εταιρεία πέρασε πολύ χρόνο σάρωση και αντιγραφή φωτογραφιών γατών στο δίκτυο, και μόλις τελειώσει το σύμπλεγμα υπολογιστών μέσω του νευρικού δικτύου θα μπορούσε να εντοπίσει μια γάτα σε οποιαδήποτε φωτογραφία που είχε μια σε αυτήν. Μικρές γάτες, μεγάλες γάτες, λευκές γάτες, γάτες τσίτι, ακόμη και ορεινά λιοντάρια ή τίγρεις ήταν γάτες, επειδή το νευρωνικό δίκτυο είχε τόσα πολλά δεδομένα για το τι «ήταν» μια γάτα.

Έχοντας υπόψη αυτό το παράδειγμα, δεν είναι δύσκολο να καταλάβουμε γιατί η Google θα ήθελε να εκμεταλλευτεί αυτή τη δύναμη μέσα σε ένα τηλέφωνο. Ένας νευρικός πυρήνας που μπορεί να διασυνδεθεί με έναν μεγάλο κατάλογο δεδομένων θα μπορούσε να εντοπίσει τι βλέπει ο φακός της κάμεράς σας και στη συνέχεια να αποφασίσει τι να κάνει. Ίσως τα δεδομένα σχετικά με το τι βλέπει και τι αναμένει να μεταβιβαστούν σε έναν αλγόριθμο επεξεργασίας εικόνας. Ή ίσως τα ίδια δεδομένα θα μπορούσαν να τροφοδοτηθούν στον Βοηθό για να αναγνωρίσουν ένα πουλόβερ ή ένα μήλο. Ή ίσως θα μπορούσατε να μεταφράσετε γραπτό κείμενο ακόμη πιο γρήγορα και πιο ακριβή από ό, τι το κάνει τώρα η Google.

Δεν πιστεύω ότι η Google θα μπορούσε να σχεδιάσει ένα μικρό τσιπ που θα μπορούσε να διασυνδεθεί με ένα νευρωνικό δίκτυο και τον επεξεργαστή εικόνας μέσα σε ένα τηλέφωνο και είναι εύκολο να καταλάβουμε γιατί θα ήθελε να το κάνει. Δεν είμαστε σίγουροι για ποιο ακριβώς είναι το Pixel Neural Core ή για ποιο θα μπορούσε να χρησιμοποιηθεί, αλλά σίγουρα θα ξέρουμε περισσότερα μόλις δούμε το τηλέφωνο και τις πραγματικές λεπτομέρειες όταν "επίσημα" ανακοινωθεί.

instagram story viewer