Handy Ai Application
Handy Ai est un agent IA open source pour Android qui utilise Claude pour regarder l’écran, puis appuyer, saisir du texte et effectuer des balayages dans les applications afin d’accomplir des tâches. Il est conçu pour les utilisateurs aveugles, malvoyants et ayant des troubles moteurs, et fonctionne aussi pour le contrôle mains libres des applications Android.
Vous pouvez dicter ou saisir une tâche, entendre chaque étape lue à voix haute et l’interrompre à tout moment. L’application nécessite Android 11 ou une version ultérieure ainsi qu’une autorisation d’accessibilité. Elle prend aussi en charge les étapes Claude incluses ou votre propre clé API Anthropic, ainsi que la reconnaissance optique de caractères (OCR) sur l’appareil pour lire le texte à l’écran.
L’entrée vocale, la synthèse vocale, les alias nommés, l’historique de chat local et un mode facile avec un seul gros bouton micro contribuent à simplifier l’interface. Un raccourci d’accessibilité flottant permet d’ouvrir l’application depuis n’importe où.
Fonctionnalités
- Saisie des tâches en priorité vocale avec reconnaissance vocale
- Appuis, saisies, balayages et attentes pilotés par Claude
- Annonce étape par étape avec synthèse vocale
- OCR sur l’appareil pour lire le texte à l’écran
- Bouton de raccourci d’accessibilité pour un accès rapide
- Mode facile avec un seul gros bouton micro
- Alias nommés pour les contacts, les commandes et autres raccourcis
- Historique de chat local avec plusieurs sessions
- Avertissement pour les actions destructrices avant l’envoi, l’achat ou la suppression
