MrRobot : Robot Rapiro piloté par mobile Ubuntu avec interaction voix, toucher et secousse

MrRobot est une application Ubuntu Mobile qui donne vie au robot Rapiro grâce à des contrôles intuitifs par voix, toucher et mouvement. Développée en seulement 28 heures lors du Ubuntu Shenzhen Hackathon, le projet montre comment les appareils mobiles peuvent s'interfacer harmonieusement avec la robotique en utilisant du matériel et logiciel open‑source.

Tout le code source, le firmware Arduino et les pièces imprimables en 3D sont librement disponibles, permettant aux hobbyistes et professionnels d'assembler leur propre Rapiro et d'étendre le système.

Ce que vous allez apprendre

1. Déployer une application Ubuntu Mobile basée sur Qt depuis le SDK vers un appareil.
2. Intégrer l'API de reconnaissance vocale et textuelle wit.ai pour créer une interface de commande mains libres.
3. Configurer un serveur Raspberry Pi qui écoute les messages WebSocket depuis l'application mobile.
4. Concevoir une interface utilisateur conviviale avec déclencheurs tactile, secousse et voix.

Liste du matériel (BOM)

1. Téléphone ou tablette Ubuntu Mobile.
2. Raspberry Pi avec dongle Wi‑Fi.
3. Kit robot Rapiro.
4. Boîte à musique optionnelle pour lecture audio.

Logiciels requis

1. Ubuntu Qt SDK (pour le développement d'application).
2. Raspbian OS sur le Raspberry Pi.
3. Arduino IDE (si vous souhaitez construire le robot de zéro).
4. Clé API wit.ai pour le traitement vocal.

Vue d'ensemble du projet

L'application offre trois modalités interactives :

• Toucher – Appuyez directement sur les contrôles à l'écran pour commander le robot.
• Secousse – L'accéléromètre de l'appareil détecte les gestes de mouvement pour déclencher des actions du robot.
• Voix – Un bouton dédié lance l'enregistrement audio ; une fois relâché, la parole est envoyée à wit.ai pour interprétation en langage naturel et transmise au robot via WebSocket.

Étape 1 : Construire l'application mobile

Suivez les instructions détaillées sur la page GitHub du projet pour installer le Ubuntu Qt SDK, configurer le projet et déployer l'application sur votre appareil Ubuntu Mobile.

Étape 2 : Déployer un serveur WebSocket sur Raspberry Pi

Connectez le Pi à votre Wi‑Fi local via un dongle, puis clonez le dépôt serveur. Démarrez le serveur et configurez‑le pour se lancer automatiquement au démarrage en ajoutant la commande dans /etc/rc.local.

Étape 3 : Assembler le matériel

Démontez soigneusement la tête du Rapiro, fixez le Raspberry Pi sur la plaque dédiée, et connectez le câble audio et le dongle Wi‑Fi. Le Pi fait désormais office de pont entre l'application mobile et la carte Arduino du robot.

Récupérer le code

Tout le code et les fichiers 3D sont disponibles sur GitHub : https://github.com/eminors/MrRobot.

Amusez‑vous à construire et personnaliser votre propre expérience de robot piloté par la voix !