Gestes et voix pour déplacer la grue

2008/11/01 Kortabitarte Egiguren, Irati - Elhuyar Zientzia Iturria: Elhuyar aldizkaria

• Teknologia

(Photo: L. Viatour)

Le système est basé sur la communication entre les humains et les machines. InterAmi est un projet qui vise à déplacer la grue avec voix et gestes. Pour ce faire, la grue dispose de deux caméras infrarouges qui recueillent la position et les gestes des opérateurs. Les opérateurs en général porteront quatre marqueurs rétroréfléchissants sur les bras, la tête et les parties du corps. Un foyer de lumière infrarouge éclairera ces marqueurs et les deux caméras qui identifient ce type de lumière recevront les mouvements du corps, réglementés internationalement. Par exemple, en étirant le bras droit signifie que la grue doit se déplacer dans cette direction.

En bref, les caméras récupéreront des images à partir desquelles elles tireront les informations fournies par les marqueurs infrarouges. Les points obtenus dans chaque image serviront à déterminer l'emplacement spatial de l'utilisateur. De cette façon, l'application peut détecter si l'utilisateur fait un geste ou non, et si un geste est identifié, le processus continuera.

En même temps, les instructions des opérateurs ou des commandes vocales seront collectées par l'application à l'aide d'un microphone au larynx, même dans des environnements bruyants. Ces microphones présentent une plus grande immunité au bruit ambiant que les microphones classiques.

Voix et image

Les caméras infrarouges recueillent la position et les gestes des opérateurs.

Robotiker-Tecnalia

Les deux signaux, voix et image, se complètent mutuellement, et le dispositif ne fait aucune action s'il ne reçoit pas le même ordre à travers les deux signaux. En bref, les deux signaux sont synchronisés à tout moment. Comme mesure de sécurité, le système compare les commandes de geste et de voix: si vous remarquez qu'ils donnent le même ordre, ce signal sera envoyé à la grue et remplira le mouvement indiqué par la grue.

Le mouvement des bras et l'ordre verbal doivent se produire simultanément et dans un certain temps. Sinon, la grue ne réagira pas. De cette façon, on peut dire que les risques professionnels sont réduits. En fait, le système ne fait aucun mouvement sauf indication contraire de l'utilisateur porteur du marqueur.

Le système se concentrera sur les installations industrielles et recueillera les informations du personnel qui se trouve dans plus d'une des zones de ces installations. Il devra donc répondre à une série d'exigences: d'une part, le système devra prêter attention aux commandes gestuelles des employés, telles que la position, le mouvement des mains et la voix; d'autre part, le système devra être capable de travailler dans plusieurs conditions d'éclairage; et enfin, les malentendus entre les commandes que l'utilisateur facilite et interprète seront évités.

Des tests sont actuellement en cours dans un atelier virtuel.

Robotiker-Tecnalia

Jusqu'à présent, les chercheurs de Robotiker-Tecnalia ont développé une installation et une grue virtuelle dans un port maritime de marchandises. Le système connaît toutes les zones où se déplace la grue, l'emplacement de tous ses éléments et ses mouvements possibles. Si la grue doit se heurter à un objet, cette application informe l'utilisateur et l'utilisateur cesse automatiquement l'activité.

Alors que pour le moment ces applications ont été intégrées à une grue virtuelle -- et uniquement dans un environnement informatique-, elles espèrent pouvoir les appliquer sur de futures grues réelles.