EN:
Go game, Poker, chess or strategy games such as StarCraft… Deep Reinforcement Learning techniques have widely demonstrated their effectiveness by enabling computer software to be trained to carry out a given task. At MBDA, we are convinced that these technologies will have a role to play in the development of future weapon systems!
Training is carried out through the execution of a large number of simulations. At each execution, the software receives a reward or penalty that allows it to adapt its behaviour and gradually improve in the task it is supposed to perform.
We have studied this technique in the context of a scenario for defending airspace by a Command & Control system. From a representation of the environment, the software must be able to select the most relevant decisions facing each threat. It must determine when to fire the missiles in order to maximise protection of the area to be defended while taking into account possible constraints such as weather and restricted engagement zones.
This project has been funded within the framework of the FR-UK partnership “MCM ITP” (Material and Component for Missiles – Innovation and Technology Partnership), the work involved Probayes, University of Birmingham, MBDA France and UK.
FR :
Jeu de Go, Poker, échecs ou jeux de stratégie tel que StarCraft… Les techniques de Deep Reinforcement Learning ont largement démontré leur efficacité en permettant d’entrainer un logiciel informatique à réaliser une tâche donnée. Chez MBDA, nous sommes convaincus que ces technologies auront un rôle à jouer dans le développement des futurs systèmes d’armes !
L’entrainement s’effectue à travers l’exécution d’un grand nombre de simulations. À chaque exécution, le logiciel reçoit une récompense ou une pénalité lui permettant d’adapter son comportement et de se perfectionner peu à peu dans la tâche qu’il est censé réaliser.
Nous avons étudié cette technique dans le cadre d’un scénario de défense de l’espace aérien par un système de Command & Control. À partir d’une représentation de l’environnement, le logiciel doit être capable de sélectionner les décisions les plus pertinentes face à chacune des menaces. Il doit déterminer à quels instants tirer les missiles afin de maximiser la protection de la zone à défendre tout en considérant des contraintes éventuelles telles que la météo et des zones restreintes à l’engagement.
Ce projet a été financé dans le cadre du partenariat FR-UK “MCM ITP” (Material and Component for Missiles – Innovation and Technology Partnership), les travaux ont impliqué Probayes, l’University de Birmingham, MBDA France et UK.
Website: http://www.mbda-systems.com/
LinkedIn: https://www.linkedin.com/company/164883/
Twitter: https://twitter.com/byMBDA