Archives de la catégorie ‘Réalité Virtuelle et Augmentée’

La DARPA développe des tactiques en essaim bio-inspirées pour le combat urbain

Publié: 6 février 2018 dans Informatique et IA, Non classé, Réalité Virtuelle et Augmentée, robotique
Tags:, , , ,
1

offset1

Le biomimétisme est un domaine en plein essor, et nous avons déjà parlé dans ce blog de l’inspiration de la nature dans différents domaines (camouflage, mobilité…). Cette fois-ci, un petit éclairage sur le programme OFFSET de la célèbre DARPA (rappel : Defense Advanced Projects Research Agency).

Là où il y a programme militaire, il y a acronyme et celui-ci (OFFSET, donc) signifie OFFensive Swarm-Enabled Tactics, soit tactiques offensives en essaim. La robotique en essaim, c’est un serpent de mer (pour rester dans la métaphore biologique); depuis les années 1990, de nombreux chercheurs et instituts s’inspirent de la nature et du comportement en essaim des oiseaux et des insectes pour imaginer des modes de travail collaboratifs pour des robots.

offset6

Car un essaim, c’est un système multi-agents en mouvement, un système complexe capable de comportements émergents et adaptés. A la différence d’un système classique (un vecteur, une mission), un essaim semble capable de prendre des décisions complexes et coordonnées dans un environnement non structuré. On parle d’auto-organisation, un processus par lequel de multiples décisions individuelles entraînent un comportement au niveau du groupe.

offset10

Prenons l’exemple d’un essaim d’insectes sociaux (fourmis, criquets…). Chaque individu possède des capacités de mouvement et de préhension limitée, l’ensemble de l’essaim étant quant à lui capable d’édifier des structures complexes. Autre exemple : les poissons ou oiseaux capables d’échapper à des prédateurs en utilisant des tactiques d’évitement tournoyantes complexes, sans que la trajectoire ne soit définie à l’avance, et chaque membre de l’essaim se fondant sur le comportement de ses voisins immédiats.

L’idée de la robotique en essaim, c’est donc de développer des algorithmes adaptés à des centaines ou des milliers de robots simples, chacun disposant de fonctions et de capacités de base et d’une connaissance limitée du monde et de ses voisins, afin de développer un comportement collectif résultant de la combinaison des actions individuelles.

offset5

Dans le programme OFFSET, la DARPA s’intéresse au combat urbain et vise à utiliser des techniques innovantes en essaim pour établir et maintenir une supériorité opérationnelle dans cet environnement. Car l’exploration d’un théâtre d’opérations en zone urbaine est complexe : l’environnement est imprévisible, compliqué (occlusion, multiples chemins, découpage vertical de l’espace). Une stratégie de type essaim permettrait d’avoir un réseau de capteurs distribués et dispersés, une combinaison des effecteurs, et une distance opérationnelle accrue. L’idée dans le programme est d’employer environ 250 éléments autonomes et hétérogènes au sein de l’essaim, dans une zone équivalant à 8 blocs urbains (rappelons que nous sommes aux USA et que leurs villes sont conçues avec Minecraft – juste pour plaisanter), et pour une durée moyenne de mission de 6 heures.

offset7

La logique est présentée dans le schéma ci-dessous : les individus sont munis d’algorithmes de base (ainsi SLAM signifie Simultaneous Location & Mapping, cartographie et localisation simultanées). Des missions de plus haut niveau sont définies (les primitives), et le système multi-agents doit lui montrer l’emploi de tactiques (comme donner l’assaut à un bâtiment).

offset2

Pour ce faire (et comme présenté dans la vidéo ci-après), l’agence cherche à développer un environnement interactif de type jeu vidéo permettant à des opérateurs humains de juger de la pertinence des tactiques de l’essaim observées. En parallèle, la DARPA souhaite disposer d’une plate-forme de test physique permettant d’évaluer les individus autonomes et de définir une architecture de contrôle.

Dans sa forme, le projet est dynamique et itératif et utilise la méthode agile: tous les 6 mois, la DARPA organise un « Sprint » – donc une session de prototypage rapide – sur l’une des thématiques d’intérêt : autonomie de l’essaim, tactiques de l’essaim, interaction essaim/humain, environnement virtuel et plate-forme de test physique.

offset8

En parallèle, l’agence peut décider de déclencher un « sprint » sur une thématique ad hoc, à n’importe quel moment. Le schéma ci-après présente l’organisation du projet.

offset9

Le projet est innovant dans le fond et la forme, même si c’est encore une fois l’alliance de groupes industriels « classiques » qui rafle la mise, la phase 1 du contrat ayant été notifiée à Raytheon BBN Technologies et Northrop Grumman, les acteurs moins classiques se voyant intervenir lors des sprints. Presque innovant, donc…

Des armes soniques pour pirater les capteurs des terminaux mobiles

Publié: 1 août 2017 dans Informatique et IA, Non classé, Réalité Virtuelle et Augmentée
Tags:, , , ,
0

sounic6

Ce qui est bien quand on tient un blog comme le mien avec la « Black Hat Conference », c’est qu’on est sûr que chaque édition apportera son lot d’innovations, pour nous convaincre que décidément, la sécurité informatique dans notre monde hyperconnecté, ce n’est pas de la tarte.

Rappelons que la Black Hat Conference est un événement annuel créé il y a maintenant vingt ans par Jeff Moss (également fondateur de la conférence DEFCON), et qui rassemble différents « briefings » sous forme de conférences à Las Vegas, Amsterdam, Tokyo et Washington (plus quelques autres événements). Le sujet est celui de la cybersécurité et vise à partager l’état de l’art sur le domaine, et les bonnes pratiques associées. Pour faire simple : c’est la messe annuelle des hackers !

sonic4

Cette fois-ci, l’innovation vient de l’équipe Alibaba Security, le département de sécurité informatique du groupe chinois Alibaba. En partenariat avec la prestigieuse université pékinoise de Tsinghua, l’équipe a présenté une conférence/démo intitulée « Sonic Gun to Smart Devices » et sous-titrée « comment vos appareils peuvent être contrôlés par des sons ou des ultrasons ».

sonic8

L’idée est de montrer que les systèmes embarqués dans une tablette, un smartphone ou un drone, tels que les gyroscopes, accéléromètres ou autres systèmes microélectromécaniques (ce que l’on appelle des MEMS) sont en fait sensibles aux sons ou aux ultrasons. Le principe est en fait simple : il consiste à trouver ce que l’on appelle la fréquence de résonance du système ciblé.

Prenons l’exemple d’un gyroscope ou d’un accéléromètre. Ces systèmes peuvent être comparés avec des systèmes « masses-ressorts » mais à l’échelle microscopique (ce sont souvent des accéléromètres soit capacitifs – ci-dessous, soit piézo-électriques).

sonic3

Ils possèdent une fréquence de résonance qui leur est propre : toute interférence avec celle-ci provoque donc un leurrage de la stabilité du capteur, ce qui amène ce dernier à envoyer des données erronées.

sonic1

C’est donc le principe des attaques menées par l’équipe Alibaba. Les chercheurs ont ainsi utilisé une « arme ultrasonique » (en gros, un système de génération d’ultrasons, réalisés à la main dans leur atelier) permettant de moduler la fréquence des sons afin qu’elle corresponde à la fréquence de résonance du capteur MEMS visé.

Une fois la fréquence de résonance atteinte, le capteur vibre et devient désorienté, car il perd sa référence stable, il envoie donc des valeurs fausse au système qui l’héberge.

sonic2

Une première démonstration assez impressionnante montre ce que l’on peut faire en piratant ainsi un casque de réalité virtuelle Oculus Rift (le sac en papier pour l’infortuné qui porterait le casque n’est pas fourni) – les chercheurs ont montré une attaque analogue sur un HTC Vive ou des lunettes Hololens.

Bon, vous me direz « et alors » ? Alors… il y a pléthore de systèmes qui pourraient être piratés de cette manière. Les auteurs ont ainsi démontré des attaques sur un smartphone (ici le Samsung Galaxy S7)

Sur un drone de type DJI Phantom (ici sur la caméra, mais également sur les hélices)

Ils ont également montré qu’un hoverboard électrique auto-équilibré (en gros une skateboard muni de gyroscopes et capables de se stabiliser tout seul), semblant initialement immunisé, devenait vulnérable si on pratiquait une petite incision sur sa coque (plastique), afin de laisser passer les ultrasons – on peut aussi utiliser des émetteurs ultrasoniques de forte puissance. Et que pendant l’attaque, il oscillait d’avant en arrière – on imagine ce que cela pourrait donner sur la route.

Car potentiellement, une telle attaque serait applicable au piratage d’une voiture connectée – soit par exemple en provoquant le déclenchement intempestif des air bags (non, pas très agréable quand on conduit) soit en destabilisant des véhicules autonomes pour provoquer des accidents. C’est d’autant plus ennuyeux que le matériel nécessaire ne relève pas de la science des particules – le générateur utilisé a coûté aux chercheurs la somme dérisoire de 320$ !

sonic7

Heureusement, les parades sont identifiées : on peut ainsi protéger les MEMS des sons parasites provenant de l’extérieur par des revêtements isolants, utiliser un logiciel de surveillance et de contremesure permettant de détecter puis de contrer tout émission sonore par des mécanismes de réduction active de bruit (en gros on envoie une longueur d’onde opposée – c’est le principe des casques réducteurs de bruit). Mais la meilleure parade réside dans l’utilisation de MEMS de nouvelle génération peu sensibles aux stimuli externes, comme les gyroscopes SD-BAW pour « substrate-decoupled bulk-acoustic wave dont le principe de fonctionnement est décrit dans ce document .

Cette attaque a l’intérêt de mettre en évidence la vulnérabilité des équipements professionnels ou grand public ; on trouvera toujours en effet une faille, un nouveau mode d’attaque, une vulnérabilité exploitable. Il est donc indispensable, en tout cas pour les équipements critiques ou militaires, de considérer l’aspect sécurité, et de ne pas considérer qu’une transposition directe du monde civil au monde professionnel ou militaire doit être la règle…

PLAN-X : un outil de visualisation du cyberespace de bataille

Publié: 25 juillet 2016 dans C4ISR et CMI, Informatique et IA, Non classé, Réalité Virtuelle et Augmentée
Tags:, , , , , , , , , , , ,
0

 

planx3

Oui, je sais, je parle beaucoup des projets DARPA. Mais avec plus de 3 milliards de budget, il n’est pas étonnant que des projets ébouriffants voient le jour régulièrement. Celui-ci concerne la cyberdéfense, et s’appelle PLAN-X. Et il est pour l’instant doté de 125M$/an (depuis 2012).

L’idée est de disposer d’un outil permettant, en temps réel, une navigation dans le cyberespace, une visualisation interactive des données, et l’élaboration de plans graphiques d’opérations. Comme dans les meilleurs films de science-fiction, l’opérateur de PLAN-X peut visualiser les réseaux et, le cas échéant, les intrusions en temps réel.

planx1

L’outil est présenté par la DARPA comme un outil d’unification des systèmes de cyberattaque et de cyberdéfense, sous forme d’une interface facile d’utilisation pour les « hackers militaires américains » (je cite) et a vocation à fournir un partage de la situation tactique (situational awareness) du cyberespace d’opérations. Ouf.

planx4

PLAN-X permet d’explorer des réseaux visuellement, et de déclencher des plans d’opération (envoi d’une sonde, scan d’un réseau, recherche de cibles ou de vulnérabilités, etc…). L’utilisateur est littéralement « projeté » dans le cyberespace, par l’utilisation de techniques de visualisation de données immersives. Il s’agit réellement d’une extension des techniques de cartographie militaire au cyberespace : un opérateur peut ainsi donner une mission de défense d’un « périmètre virtuel clé » : serveurs, routeurs, passerelles, ou toute autre zone sensible du cyberespace. Vous trouverez ci-dessous une vidéo de présentation par le chef de projet de la DARPA Frank Pound assez longue (je vous conseille de regarder la partie démo vers 28 minutes).

Pour construire leur modèle de données, les développeurs de PLAN-X  se sont inspirés du modèle CybOX, un acronyme signifiant « Cyber Observable Expressions », disponible en suivant ce lien. Il s’agit d’un langage structuré permettant de représenter des évènements cyber-observables, par exemple la création d’une clé de registre, le trafic réseau parvenant à une adresse IP donnée, etc… Le système a été notamment développé par la société américaine MITRE. PLAN-X agrège nombre de ces techniques : ainsi des standards pour échanger des informations sur les menaces Cyber comme STIX ou TAXII, ou le langage de programmation visuelle SCRATCH permettant de construire graphiquement des plans d’action.

Le développement de PLAN-X a été confié à quelques géants comme Raytheon BBN et Northrop Grumman, mais de plus petites structures ont également été sollicitées. Ainsi, le système a été adapté à des lunettes de réalité virtuelle de type OCULUS RIFT avec l’aide de deux sociétés : Frog Design et Intific.

planx2

La démonstration permet de se projeter dans l’environnement virtuel du cyberespace en 3 dimensions, et de « tourner » autour des données (l’image ci-dessous, assez déformée, montre ce que voit l’opérateur à travers ses lunettes).

planx5

 Après avoir été testé lors des exercices CyberFLAG et CyberGUARD en juin dernier, le système est annoncé pour une mise en service opérationnelle en 2017. Le premier objectif est de permettre à la Cyber Mission Force (CMF) de conduire des opérations coordonnées dans le cyberespace, via cet outil immersif véritablement impressionnant. Un pas de plus vers un futur à la « Minority Report ».

SFERION, un système de fusion de données pour assister les pilotes d’hélicoptères

Publié: 4 septembre 2015 dans Aéronautique, Electronique de défense, Optronique, Réalité Virtuelle et Augmentée
Tags:, , , , ,
0

sferion1

La société Airbus Defense & Space a annoncé avoir conduit une série d’expérimentations à l’aide d’un hélicoptère Bell 206, en vue de démontrer les capacités de son système SFERION d’assistance au pilotage en conditions de visibilité dégradées ou réduites. L’idée est de permettre au pilote de visualiser les informations prioritaires pour sa sécurité, lorsque l’environnement est complexe : météo dégradée, présence d’obstacles (pylônes ou fils électriques, arbres, …), modification rapide de la situation tactique, terrain complexe inconnu… Toutes ces informations sont projetées au pilote sous forme d’indications visuelles en head-up display (affichage tête haute), ou via des écrans dédiés.

sferion4

A la différence des HUD conventionnels, le système superpose des données synthétiques (zone ou ligne de sécurité, exagération de la visualisation des obstacles, …) en temps réel, en cohérence complète avec le terrain.

Pour ce faire, le système SFERION est composé de deux modules : SFERISENSE, qui repose sur un senseur Laser, et permet de détecter dynamiquement les obstacles ou même la nature des zones d’atterrissage possibles (module déjà largement en service), et SFERIASSIST, un module de fusion de données capable de combiner en temps réel l’information reçue du senseur, et les bases de données des zones concernées.

sferion3

Le pilote est ainsi capable de visualiser les indications critiques en temps réel : prochain amer de navigation, obstacles importants, ou même présence d’objets mouvants sur la zone d’atterrissage. Au-delà, le système est envisagé comme cœur technologique pour un futur module de pilotage d’hélicoptère en mode semi-automatique.

Concours innovation du SIMDEF2015 : et le gagnant est…

Publié: 9 juillet 2015 dans Informatique et IA, Réalité Virtuelle et Augmentée
Tags:, , , ,
0

Concours

Retour sur le concours d’innovation du SIMDEF 2015 qui s’est déroulé hier et que j’ai eu le grand plaisir d’animer, avec 10 candidats officiels, 9 présents, et trois lauréats de grande qualité.

Le gagnant du concours est la société VOXYGEN, qui a présenté une innovation intitulée « la voix en soutien à la simulation ». La société est une société Française, spin-off d’Orange Labs, spécialisée dans la synthèse vocale naturelle, multi-expressive et multilingue. Voxygen dispose d’un savoir-faire établi en matière de création de voix de synthèse qui lui permet de créer des voix avec très peu de données et avec une maîtrise complète et novatrice de l’expressivité – et je dois dire que la démonstration était impressionnante.

1178

Trois exemples de mise en situation de la technologie dans un contexte de simulation ont été présentés: en premier lieu, et selon la société, « l’immersion de l’apprenant passe par plus de réalisme dans le ton de la voix de l’instructeur virtuel, en adéquation avec le message à faire passer. Une analyse des situations d’apprentissage fait ressortir cinq types de messages : informations didactiques, consignes, alertes, messages d’urgence et encouragements. A chacun de ces messages correspond un ton différent de la voix de synthèse », et une démonstration a été présentée avec une leçon de conduite virtuelle.

La voix est aussi un canal privilégié pour la remontée d’informations, en complément ou en alternative à un affichage. Enfin, la société a présentée des « voix rush » consistant à reproduire la voix d’une personne avec des enregistrements quelconques, non prévus initialement à cet effet, afin de lui faire dire ce que l’on souhaite. Entendre un texte énoncé avec la voix de Jacques Chirac est déjà en soi assez bluffant). Assez amusant : un catalogue de voix dont un extrait est présenté sur le site de la société, et ci-dessous:

simdef1

Bravo donc à Voxygen pour ce prix : la société est visible ici.

En ce qui concerne les 2e et 3e prix :

  • 2e prix : société INGENUITY I/O : environnement de prototypage rapide, là encore assez bluffant, dont vous trouverez une démonstration video sur cette page. La société travaille pour l’ENAC, Airbus, DCNS…
  • 3e prix : projet MADE – et je salue particulièrement l’enthousiasme, l’inventivité et la clarté d’exposition des étudiantes lauréates. Il s’agit d’un « serious fun game » dont le but est de permettre à des managers, chefs d’équipe de faire travailler leurs collaborateurs en vue d’améliorer la gestion d’éléments imprévus, la communication et la gestion des priorités.

simdef2

A noter : ce projet est un projet étudiant réalisé dans le cadre du Master de management de projets innovants en jeu vidéo et applications mobiles (www.master-maje.fr) – une des seules formations du domaine.

Bravo donc à tous les participants, que vous retrouverez sur cette page, et bravo aux lauréats. A l’année prochaine !

Une technologie pour tactiliser virtuellement l’air ambiant       

Publié: 2 avril 2015 dans Réalité Virtuelle et Augmentée
Tags:, , , , ,
0

ultrahaptic

Dans le monde de la réalité virtuelle, on connaissait déjà les systèmes permettant de fournir des illusions haptiques, telles que la société SENSEG (voir plus bas). Aujourd’hui, c’est la société britannique UltraHaptics qui présente une technologie permettant de créer, à l’aide d’ultrasons, des formes virtuelles tridimensionnelles dans l’air ambiant. Le principe est d’utiliser les ultrasons pour générer des variations de pression donnant à l’utilisateur l’impression qu’il touche une surface ou un objet. Cette technologie, initialement développée par l’Université de Bristol, permet donc d’interagir avec des objets virtuels, de sentir des boutons ou des commandes, ou de fournir un retour d’effort à l’utilisateur. Ultrahaptics a ainsi développé et industrialisé sa solution à partir d’une levée initiale de fonds de 600 000£.

ultrahaptics2

La technologie permet de créer un point de haute pression d’un diamètre minimal de 8,5mm, mais cette forme peut être modifiée pour créer une surface quelconque. Le champ de pression est en effet suffisamment fort pour déplacer très légèrement la peau de l’utilisateur, et lui permettre de ressentir une forme. La vidéo ci-après présente le concept.

Dans le domaine de la simulation, cela permet donc de renforcer l’immersivité d’un utilisateur confronté à un environnement virtuel. Ce n’est pas la première solution de ce type à présenter un tel potentiel. Dans le cas de la solution proposée par exemple par la société SENSEG, s’agit d’utiliser des champs électrostatiques afin de donner l’impression à l’utilisateur qu’il parcourt du doigt des textures différentes. En réalité, l’illusion est générée par la restitution de différents niveaux de friction provoquée par la variation des champs électrostatiques.

En conséquence, l’utilisateur a l’impression qu’il ne touche pas un écran mais bien une surface texturée particulière. De la même manière, la société Elliptic Labs propose une solution d’écholocation des mouvements. Ultrahaptics combine, en quelque sorte, ces deux aspects pour localiser les gestes et donner une illusion haptique. Associée à des modélisations graphiques et/ou sonores, l’impression d’immersion dans un environnement virtuel est fortement renforcée.

Depuis l’essor des masques de réalité virtuelle, Oculus Rift en tête, le marché cherche constamment des solutions permettant de renforcer l’illusion physique, en sus de l’illusion visuelle. Dans le domaine de la préparation opérationnelle et de l’entraînement – soit au maniement d’un système d’armes, soit pour l’entraînement du fantassin débarqué – une telle solution contribuerait à enrichir l’environnement de l’utilisateur, en particulier par le retour de force.

La solution d’UltraHaptics a été présentée et a obtenu un prix au dernier CES de Las Vegas, et les premières applications commerciales devraient être disponibles d’ici un an.

Q-Warrior™, le véritable casque d’Iron Man existe

Publié: 1 avril 2015 dans Aéronautique, Electronique de défense, Réalité Virtuelle et Augmentée
Tags:, , ,
0

BMK1438_c

Bon, il n’en n’a pas l’apparence, mais le casque d’Iron Man lui permettant de visualiser des informations comme un head-up display – visualisateur tête haute – en superposition de la situation réelle,  existe, et c’est la société BAE qui l’a présenté.

Baptisé Q-Warrior, le système est en réalité un dispositif bas coût qui se fixe sur le casque du fantassin afin de lui fournir des moyens de visualisation avancés. Il permet de réaliser du « blue force tracking » mais également de visualiser des forces hostiles en 3D, et les informations liées à l’énergie électrique des équipements du combattant. L’image ci-après présente plus en détail les différentes fonctionnalités du système.

q-warior_big

L’innovation consiste évidemment dans le concept lui-même, mais également dans la capacité à gérer sans accroc les transitions nuit/jour, ou l’illumination et la visibilité sur le véritable champ de bataille. La video ci-après présente le produit.

Mais au-delà de la performance technologique incontestable, il convient de se poser la question de la dimension opérationnelle du concept : quid de la gêne éventuelle dans les mouvements de la tête ou de l’œil, quid de la « surcharge informationnelle » en cas de stress de combat ? Il faut différencier le contexte du HUD dans le domaine du combat aérien, où le pilote doit assurer sa tâche en environnement contraint mais faisant corps avec sa machine, et le cas du fantassin, exposé, en environnement hostile ouvert, et ne pouvant compter sur d’autres automatismes pour sa survie. L’illustration ci-après est extraite d’un rapport de 1997 que vous pouvez trouver ici.

stress

Elle montre la difficulté à gérer le stress du combattant, en particulier du point de vue du maintien de ses capacités opérationnelles.

Une belle prouesse technologique néanmoins, même si des systèmes analogues ont été développés, notamment par THALES avec TopOwl et le casque SCORPION. A suivre donc, après validation de la pertinence en opérations.

Une visualisation en réalité immersive de l’espace de bataille numérisé sous l’angle C4ISR: Battlespace Vista

Publié: 17 mars 2015 dans C4ISR et CMI, Réalité Virtuelle et Augmentée
Tags:, , , , , , ,
0

bv4

J’avais déjà écrit un article sur JFX3, le programme sur la réalité augmentée conduit par nos amis britanniques. Aujourd’hui, focus sur un programme Français ayant pour but de fournir une visualisation immersive et interactive de l’espace de bataille numérisé, et qui a fait l’objet de démonstrations remarquées lors d’Eurosatory et d’Euronaval : Battlespace Vista, développées par THALES (TCS, TRT et TRS).

Cela fait longtemps que THALES réfléchit sur la meilleure manière d’appréhender l’espace de bataille moderne, qui regroupe les champs physiques de mer, terre, air et espace, avec le champ immatériel de l’information. En effet, la  numérisation de cet espace repose sur l’intégration des réseaux de communications tactiques (liaisons de données, messageries sur réseaux H/V/UHF) et des systèmes d’information opérationnels communicants. Si cette numérisation produit de puissants multiplicateurs de forces, elle appelle également de nouveaux modes de visualisation simplifiée d’une situation complexe intégrant terrain, forces, matériels, connectivité radio et empreinte capteurs, pour tirer le meilleur parti des opérations infovalorisées.

Ce n’est pas un problème trivial (mais la phrase précédente le laissait présager J). Il s’agit de passer d’une tenue de situation à une véritable compréhension de la situation, et ce sans surcharger la vision du chef, ni complexifier inutilement sa perception des opérations en cours. Autrement dit, ne pas faire « de la technologie pour la technologie ».

A cet égard, la démonstration capacitaire Battlespace Vista s’est révélée particulièrement illustrative, lors d’Eurosatory et d’Euronaval, en 2014. A l’occasion d’Eurosatory, THALES a présenté une démonstration fondée sur le scenario d’une mission d’appui rapproché numérisé au profit d’un SGTIA en Afghanistan. Il s’agissait d’une démonstration immersive, mêlant représentation innovante de l’espace de bataille, et manipulation en réalité immersive. Le résultat était impressionnant – même si l’on peut, à mon sens, améliorer la technologie d’immersivité utilisée. Mais cela n’était qu’une démonstration.

Battlespace Vista Eurosatory 2014

Ce qui m’a personnellement frappé, c’est la facilité pour un utilisateur de se placer au point de vue du chef en utilisant cette interface (lunettes 3D actives, joystick permettant de se positionner dans « l’espace informationnel »).

SAMSUNG CAMERA PICTURES

Au-delà, cette démonstration, positionnée en conduite des opérations au niveau d’un « Tactical Operations Center » et ses appuis interarmées interalliés, a permis d’illustrer trois constats.

  1. En premier lieu, l’intégration air-sol aux niveaux interarmées, interarmes et interalliés est aujourd’hui une réalité de l’appui-feu numérisé : gestion partagée de la 3D entre artillerie (chaînes ATLAS, MARTHA..) et hélicoptères, avions ou drones, avec par exemple la définition de zones de tir réservées, partage de situation tactique air-sol et le suivi de forces amies entre moyens air,terre et forces spéciales, ou encore la faculté d’attribuer des cibles sans crainte de tir fratricide en minimisant les risques de dégâts collatéraux.
  2. La capacité spatiale se déploie au niveau opératif et devient essentielle à la conduite des opérations sur l’espace de bataille numérisé: elle permet la navigation, le positionnement, et la datation (navigation et frappes de précision),grâce au système Galileo et ses récepteurs embarqués, la tenue de situation spatiale consolidée (avec information des forces), l’observation (spatiocartes et systèmes d’information embarqués, analyse de site et évaluation des frappes), grâce à des stations de géographie ou d’imagerie déployées, et évidemment, l’intégration des télécommunications (mobilité, connectivité, qualité de service), grâce notamment aux systèmes Syracuse 3 (bande X) et Athena-Fidus (bande Ka), avec leurs terminaux fixes ou mobiles (VENUS).
  3. La numérisation des véhicules de combat et leur intégration en réseau autour de systèmes de missions est une nouvelle capacité des GTIA numérisés : elle permet d’insérer l’action du GTIA dans ses appuis interarmes et interarmées, synchroniser la manœuvre et les effets, procéder à une allocation des rôles et des cibles avant et pendant l’engagement, capacité d’autoprotection : alerte immédiate et déclenchement automatisée de contre-mesures.

bv1

Une belle démonstration donc, et une expertise française incontestée dans ce domaine, qui devrait porter les couleurs de notre pays lors de l’exercice Bold Quest cette année (Bold Quest est un exercice interallié et interarmées d’expérimentation dans les missions d’identification, de coordination des feux, d’appui aérien et de cyber défense).

La réalité augmentée sur le champ de bataille : le projet JFX3

Publié: 8 mars 2015 dans Réalité Virtuelle et Augmentée
Tags:, , , , ,
1

ultraviz1

Petit focus sur le programme JFX3 du Ministère de la Défense britannique. Ce programme, conduit notamment par la société SEA (une filiale de Cohort PLC) vise à évaluer les apports de la réalité augmentée (RA) basée sur des COTS (composants commerciaux sur étagère) et des GOTS (idem, mais composants gouvernementaux) dans le domaine de la Défense. Son nom complet est Joint Focus Experimentation 3(JFX3).

En particulier, l’objectif était d’identifier les bénéfices apportés par la RA, et les solutions pouvant être déployées rapidement, à coût modeste, pour les opérations et l’entraînement, en exploitant les récents progrès dans le domaine commercial.

Ce programme a été réalisé en 2 phases :

  • Une première phase d’étude dédiée à analyser le domaine, identifier les concepts et analyser les technologies. Cette première phase a montré que l’évolution du domaine était plus rapide que celle de technologies comparables, facilitée par les applications sur tablettes, smartphones… Elle a identifiée également les barrières possibles pour une utilisation dans le domaine de la défense : gestion des formats, des priorités, interopérabilité, exigences matérielles, etc…)
  • Une deuxième phase, conduite en 2013, était constituée d’une série d’expérimentations terrain permettant une première mise en pratique et une identification des barrières à l’adoption de la RA. Quatre concepts ont été évalués :
  1. La navigation augmentée (infanterie débarquée), de jour comme de nuit,
  2. Les alertes directionnelles / le repérage (infanterie débarquée)
  3. Les alertes de proximité (infanterie débarquée) vis-à-vis de points d’intérêts
  4. La visualisation au travers d’un véhicule (contexte embarqué) : des tablettes fixes ou portables situées dans le véhicule affichent des images d’une caméra à 360° montée sur le véhicule, enrichies d’une couche d’information en RA. Voir à ce sujet mon article sur l’évaluation d’une telle technologie par l’armée norvégienne ici.
  5. Pour les 3 premiers concepts, lorsque cela était applicable, les évaluations portaient sur les RA visuelle (jumelle), audio (tonalités directionnelles et voix de synthèse générées dans un casque) et haptique (ceinture haptique qui stimule le sens du touché par application de forces, de vibration et de mouvements ou des actuateurs posés sur les bras du sujet).

 simulation-gaming

Les résultats ont montré :

  • Que dans le domaine de la navigation, les routes utilisées via un procédé de RA étaient plus pertinentes que les routes déduites par les moyens usuels (de nuit comme de jour, avec un effet plus spectaculaire de nuit)
  • Que dans le domaine des alertes directionnelles, la radio était finalement la technique la plus adaptée
  • Que le « blindage transparent » générait une charge de travail plus grande, mais était très performant en termes de pertinence opérationnelle.

smallarms-simulation

En outre, l’étude (qui s’est intéressé aux contextes Terre et Mer) a identifié quelques barrières à l’adoption de la RA :

  • Concordance : la manière dont les informations en RA sont cohérentes avec le monde réel. Cette étape de calibration est assez simpliste dans le monde des applications grand public. Elle doit être renforcée dans le monde de la défense
  • La technologie coupe le sujet des alertes et signaux atmosphériques et environnementaux qui l’entourent. Dans certains cas (ex opérations des FS) cela est handicapant
  • Immaturité des dispositifs visuels en regard des contraintes militaires
  • Immaturité de l’intégration de la technologie (même si celle-ci est mature) dans un système de systèmes militaires
  • Rythme de l’obsolescence, en comparaison du rythme d’acquisition dans les armées
  • Taille, robustesse, poids, pour le combattant individuel
  • Sécurité des communications et du stockage des informations sensibles.

Ce type de projets est essentiel pour l’évaluation non seulement d’une technologie, mais de sa capacité à remplir un besoin opérationnel. Dans le même ordre d’idées, on pourra citer le projet ULTRA-VIS (Urban Leader Tactical Response, Awareness and Visualization), répondant précisément aux objectifs d’intégration de la réalité augmentée au sein des Forces, en Appui aux Opérations, conduit par la DARPA qui en a publié récemment quelques résultats (voir images ci-dessous, et image de tête de l’article).

ultra2

En l’occurrence, il s’agit d’un nouveau casque de RA permettant au fantassin d’avoir à la fois accès aux informations synthétiques opérationnelles, et de ne pas se couper de son environnement.

DARPA ULTRAVIS

Ce casque est à base de guides d’ondes holographiques.  Nous examinerons bientôt dans ce blog les différentes catégories de lunettes pour la réalité virtuelle et augmentée.

En conclusion, aujourd’hui, la plupart des démonstrations d’utilisation de la réalité augmentée se font dans des environnements parfaitement connus, limités dans l’espace, avec des applications où l’utilisateur n’a pas une entière liberté de mouvement et d’action. Ceci,on peut le comprendre, pour des raisons de maturité et robustesse des technologies employées. Toutefois, les conditions opérationnelles d’utilisation de telles technologies militent pour la conduite d’expérimentations telles que JFX3, qui a le mérite de poser correctement le problème de la pertinence de l’emploi futur dans un contexte opérationnel exigeant.

 

 

Voir à travers un char

Publié: 3 mars 2015 dans Blindage et matériaux, Réalité Virtuelle et Augmentée
Tags:, , , ,
3

article-2621476-1D9D205400000578-542_634x356

…c’est l’expérience réalisée par l’armée norvégienne dans une expérimentation fondée sur l’utilisation du casque de réalité virtuelle Oculus Rift. L’idée est d’équiper le char de plusieurs caméras lenticulaires installées sur le pourtour. Via un serveur, ces caméras sont reliées à un casque Oculus Rift qui permet, en fonction de l’orientation de la tête de l’utilisateur, de composer une image synthétique de l’environnement du char en utilisant les caméras de la zone concernée. Un logiciel de réalité augmentée développé par la société Augmenti permet de réaliser la superposition avec les indications de guidage, celles relatives au système d’armes et aux cibles.

article-2621476-1D9D205000000578-50_634x286

Le blindage devient ainsi « transparent » et permet ainsi d’avoir une vision à 360 degrés autour du véhicule. Le film (sous titré en anglais) est visible ici

L’idée n’est pas nouvelle: au salon du Bourget 2013, Finmeccanica avait dévoilé un concept analogue pour voir au travers du plancher d’un hélicoptère de combat. Ce qui a changé, c’est le coût d’une telle solution, rendu abordable par le recours à des équipements de réalité virtuelle grand public.

article-2621476-1D9D205800000578-308_634x347

Dans tous les cas, le concept doit être soigneusement étudié, car le recours à une image synthétique fatigue considérablement l’oeil de l’utilisateur – des tests d’acceptance sont en cours. Une telle technologie pourrait être opérationnelle avant quatre ans.

Entrées Précédentes