Οι ερευνητές του Cornell δημιούργησαν ένα ακουστικό που μπορεί να παρακολουθεί τις εκφράσεις του προσώπου

Οι ερευνητές του Cornell δημιούργησαν ένα ακουστικό που μπορεί να παρακολουθεί τις εκφράσεις του προσώπου


https://www.youtube.com/observe?v=XnJfVanC1RU

Το ακουστικό χρησιμοποιεί δύο κάμερες RGB τοποθετημένες κάτω από κάθε αυτί. Μπορούν να καταγράψουν αλλαγές στο περίγραμμα των μάγουλων καθώς κινούνται οι μύες του προσώπου του χρήστη.

Μόλις οι εικόνες ανακατασκευαστούν χρησιμοποιώντας το όραμα του υπολογιστή και ένα μοντέλο βαθιάς μάθησης, ένα συνελικτικό νευρικό δίκτυο αναλύει τις 2D εικόνες. Η τεχνολογία μπορεί να τα μεταφράσει σε 42 χαρακτηριστικά σημεία στο πρόσωπο που αντιπροσωπεύουν τη θέση και το σχήμα του στόματος, των ματιών και των φρυδιών του χρήστη.

Το C-Confront μπορεί να μεταφράσει αυτές τις εκφράσεις σε οκτώ emoji, συμπεριλαμβανομένων εκείνων που αντιπροσωπεύουν ουδέτερα ή θυμωμένα πρόσωπα. Το σύστημα μπορεί επίσης να χρησιμοποιεί ενδείξεις προσώπου για τον έλεγχο των επιλογών αναπαραγωγής σε μια εφαρμογή μουσικής. Άλλες πιθανές χρήσεις περιλαμβάνουν την παρουσία ειδώλων σε παιχνίδια ή άλλες εικονικές ρυθμίσεις που εκφράζουν τα πραγματικά συναισθήματα ενός ατόμου. Οι εκπαιδευτικοί μπορεί να είναι σε θέση να παρακολουθούν το επίπεδο συμμετοχής των μαθητών τους, ακόμη και κατά τη διάρκεια μαθήματος εξ αποστάσεως.

Λόγω του αντίκτυπου του COVID-19, οι ερευνητές μπορούσαν να δοκιμάσουν μόνο το C-Confront με εννέα συμμετέχοντες. Ωστόσο, η αναγνώριση emoji ήταν πάνω από 88% ακριβής και οι ενδείξεις του προσώπου ήταν πάνω από 85% ακριβείς. Οι ερευνητές διαπίστωσαν ότι η χωρητικότητα της μπαταρίας των ακουστικών περιόρισε το σύστημα. Ως εκ τούτου, σκοπεύουν να αναπτύξουν τεχνολογία ανίχνευσης με χαμηλότερη κατανάλωση ενέργειας.



[via]

Απάντηση

Αυτός ο ιστότοπος χρησιμοποιεί το Akismet για να μειώσει τα ανεπιθύμητα σχόλια. Μάθετε πώς υφίστανται επεξεργασία τα δεδομένα των σχολίων σας.