Die Mensch-Computer-Interaktion (HCI) bezieht sich auf den Informationsaustauschprozess zwischen dem Bediener und dem mobilen Roboter durch die eingebauten Eingabegeräte und Ausgabegeräte des mobilen Roboters. Durch Mensch-Computer-Interaktion kann der Bediener dem mobilen Roboter Anweisungen eingeben, Aktionen lehren, Parameter einstellen usw., und der mobile Roboter kann auch Roboterstatusparameter, Umgebungsüberwachungsdaten und anormale Alarminformationen an den Bediener zurückmelden. Die Eingabe- und Ausgabegeräte von mobilen Robotern können nach unterschiedlichen Typen in elektrische Mensch-Computer-Interaktionsgeräte, Schnittstellen-Mensch-Computer-Interaktionsgeräte, Multimedia-Mensch-Computer-Interaktionsgeräte und tragbare Mensch-Computer-Interaktionsgeräte unterteilt werden.
Elektrische Mensch-Computer-Interaktionsgeräte
Elektrische Mensch-Computer-Interaktionsgeräte sind Geräte, die mit mobilen Robotern durch elektrische Signale interagieren, darunter Knöpfe, Knöpfe, Schalter, Summer, Anzeigeleuchten usw. Sie reagieren schnell und sind äußerst zuverlässig und sind die am häufigsten verwendeten Arten von Ein- und Ausgängen Vorrichtungen für mobile Roboter, die häufig zum Starten, Notstoppen, Herunterfahren, Statusanzeige usw. des mobilen Roboters verwendet werden und im Allgemeinen auf dem Bedienfeld des mobilen Roboters oder an einer für den Bediener auffälligen Stelle auf der Körperoberfläche angeordnet sind zu verwenden und zu beobachten.
Schnittstellengeräte für Mensch-Computer-Interaktion
Zu den Geräten für die Mensch-Computer-Interaktion gehören: Tastatur, Maus, Lichtstift, Touchscreen, Bildschirm, Lehrgerät usw. Bediener können Eingabegeräte wie Tastaturen, Mäuse und Lichtstifte verwenden, um Elemente wie Textfelder und Menüleisten zu bedienen , Bildlaufleisten und Befehlsschaltflächen auf der UI-Schnittstelle und erteilen Befehle oder stellen Parameter an den mobilen Roboter ein. Gleichzeitig zeigt die UI-Schnittstelle den Status des Roboters in Form von Daten, Bildern, Videos usw. über den Touchscreen oder Anzeigebildschirm an.
Multimedia-Mensch-Computer-Interaktionsgeräte
Interaktive Multimediageräte umfassen sprachinteraktive Geräte und visuelle interaktive Geräte.
Sprachliche Mensch-Computer-Interaktionsgeräte umfassen Mikrofone und Lautsprecher. Basierend auf der integrierten Spracherkennungs-Engine wird die vom Mikrofon erfasste Stimme des Sprechers in Anweisungen übersetzt, die der Roboter verstehen kann, und über den Lautsprecher übertragen, um die Interaktion zwischen Mensch und Computer zu realisieren. Zu den Funktionen, die durch Sprachinteraktion realisiert werden können, gehören: Sprachwecken, Sprachsteuerung, menschliche Spracherkennung, Mensch-Maschine-Dialog, Spracherinnerung usw.
Video-Mensch-Computer-Interaktionsgeräte sind hauptsächlich verschiedene Kameras. Die visuellen Informationen der Umgebung werden über die Kamera zur Verarbeitung in den mobilen Roboter eingegeben, und die Verarbeitungsergebnisse können für Kartierung und Positionierung, Körpergestenerkennung, Gangerkennung, Gesichtserkennung, Ausdruckserkennung, Objekterkennung, Objektverfolgung usw. verwendet werden .
Tragbare Mensch-Computer-Interaktionsgeräte
Tragbare Mensch-Computer-Interaktionsgeräte werden direkt am Körper des Bedieners getragen. Sie sind interaktive Geräte, die menschliche biologische Informationsausgaben sammeln und Informationen an menschliche Sinnesorgane zurücksenden. Dazu gehören hauptsächlich: Datenhandschuhe, myoelektrische Kollektoren, EEG-Kollektoren und 3D-Brillen. Warte ab. Durch die vom Bediener getragene Ausrüstung kann die Einstellung und Steuerung des Roboters mit Hilfe von menschlichen biologischen Informationen wie mechanischen Signalen, Elektromyographie (EMG) und Elektroenzephalogramm (EEG) und den multimodalen Informationen des Roboters vervollständigt werden kann mittels 3D-Brille etc. Feedback empfangen werden.