IoT: Ελέγξτε το HoloLens χρησιμοποιώντας τα φρύδια σας (ΗΜΓ): 5 βήματα

2024 Συγγραφέας: John Day | [email protected]. Τελευταία τροποποίηση: 2024-01-30 08:34

Αυτό το έργο ήταν μέρος του έργου NASA SUITS του Πανεπιστημίου του Κολοράντο Μπόλντερ που παρουσιάστηκε και δοκιμάστηκε στη NASA JSC τον Απρίλιο του 2019. Για το έργο εκείνης της χρονιάς, ήμουν ο επικεφαλής του έργου στην ανάπτυξη υλικού και αυτή ήταν μια από τις συνεισφορές μου. Διαβάστε περισσότερα για την πρόκληση της NASA SUITS εδώ.

Με αυτό το έργο, ήθελα να επιτρέψω σε οποιονδήποτε (στην περίπτωση αυτή αστροναύτες EVA) να διασυνδεθεί με ένα Heads-Up-Display (HUD) που έχει αναπτυχθεί στο Microsoft HoloLens χωρίς να χρησιμοποιεί τις ενσωματωμένες χειρονομίες ή φωνητικές εισόδους. Αντιμετώπισα αυτόν τον στόχο από την άποψη της προσβασιμότητας, ήθελα να αναπτύξω ένα περιφερειακό/φορετό που θα επέτρεπε στους αστροναύτες EVA να διασυνδέονται με την οθόνη τους χωρίς να επικοινωνούν με τον έλεγχο εδάφους και λόγω της υψηλής πίεσης των γαντιών τους, η διασύνδεση με χειρονομίες είναι παράλογη. Παρόλο που αυτός είναι ένας τομέας με τον οποίο είμαι κάπως άγνωστος, μπορώ επίσης να δω ότι αυτό το περιφερειακό είναι χρήσιμο για άτομα με ειδικές ανάγκες, επιτρέποντάς τους να χρησιμοποιούν το HoloLens ή άλλες συσκευές AR/VR και να εγκαταλείπουν τις διεπαφές που είναι αποκλειστικές ή αποθαρρυντικές.

Παρόλο που η λίστα στοιχείων για αυτό το έργο είναι η εξαίρεση (το HoloLens είναι πολύ ακριβό!), Η περιφερειακή συσκευή μπορεί να χρησιμοποιηθεί με άλλες συσκευές AR/VR.

Εάν έχετε οποιεσδήποτε ερωτήσεις, θέλετε να παρακολουθείτε τη δουλειά μου ή απλώς να ρίχνετε ιδέες, κάντε το στο Twitter μου: @4Eyes6Senses.

Προμήθειες

Microsoft HoloLens (ή άλλη συσκευή AR/VR)

Σωματίδιο φωτονίου

MyoWare Muscle Sensor - Ο αισθητήρας MyoWare μπορεί να αντικατασταθεί με άλλες σανίδες EMG breakout. Εάν δεν είστε σίγουροι για το ποια είναι η ΗΜΓ, σας προτείνω να διαβάσετε περισσότερα σχετικά με αυτό εδώ

Βιοϊατρικά μαξιλάρια αισθητήρων

Ενότητα (δωρεάν)

Κάποια εμπειρία με τη δημιουργία έργων στην ενότητα

Σύρμα

Βήμα 1: Σύνδεση του MyoWare με το φωτόνιο σωματιδίων

Η σύνδεση του Photon σωματιδίων στην πλακέτα MyoWare είναι αρκετά απλή. Για αυτό το βήμα, θα χρειαστεί να κολλήσετε τις συνδέσεις μεταξύ του Particle Photon και της πλακέτας MyoWare. Βεβαιωθείτε ότι έχετε ισχυρές συνδέσεις έτσι ώστε τα καλώδια να μην σπάνε ενώ φοράτε τη συσκευή. Για να αποφύγετε διαλείμματα, συνιστώ να πλέξετε τα καλώδια πριν τα κολλήσετε στο Photon.

- Συγκολλήστε ένα καλώδιο στη θύρα "+" της πλακέτας MyoWare και, στη συνέχεια, κολλήστε το άλλο άκρο του καλωδίου στην ακίδα "3v3" του Photon.

- Συγκολλήστε ένα καλώδιο στη θύρα "-" της πλακέτας MyoWare και, στη συνέχεια, κολλήστε το άλλο άκρο του καλωδίου στην ακίδα "GND" του Photon.

- Συγκολλήστε ένα καλώδιο στη θύρα "SIG" της πλακέτας MyoWare και, στη συνέχεια, κολλήστε το άλλο άκρο του καλωδίου στην ακίδα "A0" του Photon.

Βήμα 2: Μεταφόρτωση κώδικα στο Photon σωματιδίων

Χρησιμοποιώντας το IDE του Particle Photon, ανεβάστε το αρχείο.ino. Τοποθετήστε τον πίνακα MyoWare σε μια ομάδα μυών και ελέγξτε τις τιμές για να βεβαιωθείτε ότι η συσκευή σας λειτουργεί. Κοιτάζοντας τον κώδικα θα παρατηρήσετε ότι έχει ήδη οριστεί μια μεταβλητή "κατωφλίου", αυτή η μεταβλητή είναι η ελάχιστη τιμή που διαβάζει το MyoWare από τους μυς μου όταν σηκώνω πλήρως το φρύδι μου. Επίσης, έθεσα τη μεταβλητή στο "600" επειδή μου επέτρεψε να έχω κανονικές συνομιλίες ενώ φοράω το MyoWare χωρίς να δημιουργώ ψευδώς θετικά (τυχαία ενεργοποίηση), μπορεί να θέλετε να παίξετε με τις τιμές μέχρι να βρείτε το επιθυμητό όριο για τις χρήσεις σας.

Βήμα 3: Τοποθέτηση του MyoWare

Για το έργο μας NASA SUITS, επέλεξα να τοποθετήσω τον πίνακα MyoWare πάνω από το φρύδι. Εμπνεύστηκα να τοποθετήσω το MyoWare εκεί αφού είδα το έργο "'Sup Brows" που έγινε από την Adafruit. Μετά από μερικές δοκιμές, έγινε σαφές ότι τα φρύδια είναι μια εξαιρετική τοποθεσία για αυτό το συγκεκριμένο έργο. Είναι μια εξαιρετική τοποθεσία επειδή οι αισθητήρες δεν επηρεάζονται από τις συνεχείς μυϊκές κινήσεις στα χέρια, τα πόδια και τον κορμό που κάνουν οι αστροναύτες της EVA κατά τη διάρκεια διαστημικών περιπάτων.

Βήμα 4: Σύνδεση του MyoWare με ενότητα

Τώρα ήρθε η ώρα για το τελευταίο βήμα, ας συνδέσουμε το MyoWare με την Unity! Σε αυτό το Instructable περιλαμβάνεται το σενάριο που θα χρειαστεί να συμπεριλάβετε στο έργο σας Unity. Αλλά πρώτα, θα πρέπει να αλλάξετε μερικά πράγματα στον κώδικα. Αρχικά, θα πρέπει να προσθέσετε την προσθήκη JSON Object Unity στο έργο σας. Στη συνέχεια, θα πρέπει να προσθέσετε το δικό σας αναγνωριστικό συσκευής και το διακριτικό πρόσβασης στη γραμμή 19: particleURI = "https://api.particle.io/v1/devices/on'sInsert your device id]/Next? Access_token = [Insert your διακριτικό πρόσβασης]". Μπορείτε να λάβετε το αναγνωριστικό της συσκευής σας από το Particle IDE, μετά το σχήμα 2, κάντε κλικ στην καρτέλα των συσκευών σας (κόκκινο πλαίσιο) και αναζητήστε το όνομα της συσκευής σας για να βρείτε το αναγνωριστικό σας (μπλε πλαίσιο). Στη συνέχεια, για να βρείτε το διακριτικό πρόσβασης, κάντε κλικ στην καρτέλα ρυθμίσεων στο IDE.

Βήμα 5: Τέλος

Αφού τελειώσετε το έργο Unity, θα έχετε ένα HoloLens ελεγχόμενο με ΗΜΓ!

Εάν έχετε οποιεσδήποτε εμπεριστατωμένες ερωτήσεις, θέλετε να μάθετε για την αύξηση του ανθρώπου, θέλετε να συμβαδίσετε με τη δουλειά μου ή απλά να ρίξετε ιδέες, κάντε το στο Twitter μου:

Εάν ενδιαφέρεστε να συνεργαστείτε με την ομάδα μας για την πρόκληση NASA SUITS 2019 - 2020, στείλτε μου email στη διεύθυνση:

Ιδιαίτερες ευχαριστίες στο μοντέλο στην πρώτη εικόνα, τον Darren, ο οποίος δοκίμασε επίσης το σχέδιο στη NASA. Ένα άλλο ευχαριστώ στον συνεργάτη προγραμματισμού μου για το έργο AJ, ο οποίος έκανε πολλά από αυτά δυνατά.