Back to news

October 14, 2020 | International, Big data and Artifical Intelligence

Speech Recognition and AI Help Take the Pressure off Aircrew

Air accidents have decreased in recent years, but when they do occur, the crew's workload is usually at its highest level. Therefore, augmenting crew performance during high workload periods is of great importance and can help maintain flight safety.

Aircrew workloads peak when faced with a combination of unpredictable situations: meteorological conditions; high-density traffic; system failures; and flight operations like take-off, climb, descent, approach and landing. The amount of information and number of actions that need to be processed by the crew may become unmanageable, affecting flight safety. The EU-funded VOICI project addressed this threat by developing an intelligent 'natural crew assistant' for the cockpit environment. The system comprises three main technologies, namely sound recording, speech recognition and artificial intelligence. This includes a cockpit-embedded speech-processing system that understands aviation terminology, as well as an array of low-noise optical microphones and optimised array processing for it. The VOICI system also features a new and more efficient speech synthesis, adapted to aviation terminology and noise levels. For further information see the IDTechEx report on Voice, Speech, Conversation-Based User Interfaces 2019-2029: Technologies, Players, Markets.

Assessed under realistic conditions

Project partners aimed to provide a proof-of-concept demonstrator capable of listening to all communications in the cockpit, both between crew members, and between crew and air traffic control. "The VOICI system should recognise and interpret speech content, interact with the crew, and fulfil crew requests to simplify crew tasks and reduce cognitive workload," outlines project coordinator, Tor Arne Reinen.

Researchers also developed a realistic audio evaluation environment for technology experiments. This facilitated the development of the crew assistant and enabled evaluation of its performance, including the speech capture and recognition technologies for use in a noisy cockpit, together with the intelligent dialogue system with automatic speech synthesis as its main output. The audio testing environment involved a 3D physical model of a Falcon 2000S cockpit, including loudspeaker reproduction of noise recordings from a real flight. "We have demonstrated that the crew assistant is feasible under the very high noise levels of an aviation cockpit," Reinen explains.

Multiple benefits

Speech capture is achieved through both the pilot's headset and an ambient microphone array. Speech recognition using deep neural networks and the dialog system were developed explicitly for the cockpit environment and include aviation terminology and robustness to high levels of background noise. The systems function independently of cloud-based systems and employ dedicated language models for the cockpit scenario. According to Reinen, all the algorithms underlying the dialog system have been implemented and tested: from the Natural Language Understanding unit that understands natural requests to the Dialogue Core which handles the conversation flow. "Particular emphasis has been placed on the ability of the voice assistant to use contextual data," he notes. By reducing crew workload, VOICI will contribute to optimisation of operations, flight safety and crew awareness; better maintenance; reduced cost of operations; and generally higher efficiency and lower stress. "VOICI comprises both small and medium sized enterprises (SMEs) and research institutes, and cooperation within the consortium will contribute to innovation and job creation," Reinen points out.

https://www.onartificialintelligence.com/articles/21880/speech-recognition-and-ai-help-take-the-pressure-off-aircrew?rsst2id=193

On the same subject

  • Tyto Robotics distribue la technologie de test de drones ‘WindShape’ en Amérique du Nord

    January 28, 2022

    Tyto Robotics distribue la technologie de test de drones ‘WindShape’ en Amérique du Nord

    Tyto Robotics distribue la technologie de test de drones ‘WindShape' en Amérique du Nord 26 janvier, 2022 Gatineau, Canada : WindShape Ltd a signé un accord de distribution exclusif avec Tyto Robotics, une société canadienne spécialisée dans les équipements de test de drones. Tyto Robotics facilitera l'achat de la technologie « WindShaper » pour les entreprises nord-américaines, un outil utilisé pour réaliser des tests dynamiques en vol de drones de toutes tailles. WindShape a été fondée en 2016 à Genève par deux anciens élèves de la Haute Ecole Spécialisée de Suisse occidentale (HES-SO). La technologie WindShaper a été conçue comme une solution à de nombreux problèmes de test de drones, notamment la gestion de l'environnement de test et la réplicabilité des expériences. Cette solution révolutionnaire facilite les essais en vol et offre une alternative aux souffleries traditionnelles. Le partenariat avec Tyto Robotics vise à étendre la disponibilité de cette technologie aux secteurs de l'aérospatiale au Canada et aux États-Unis. Le WindShaper lui-même peut être plat ou incurvé, petit ou grand, inclinable et peut inclure des caractéristiques supplémentaires tels que le suivi de mouvement, les effets météorologiques et des filtres de turbulence. Chaque ventilateur est contrôlé indépendamment via une interface graphique en ligne ou un script personnalisé via une API de contrôle Python. La programmation 3D du flux de vent permet à l'utilisateur de simuler n'importe quel environnement de vent, y compris la turbulence, les obstacles, les rafales et les conditions d'atterrissage. En tant que distributeur nord-américain exclusif, Tyto Robotics conseille ses clients et aide à déterminer la taille du WindShaper ainsi que les options nécessaires au respect du cahier des charges de tests. Le partenariat arrive à un moment idéal alors que de plus en plus de pays s'engagent à soutenir l'innovation et l'infrastructure des drones. Les installations WindShape joueront un rôle important dans cette évolution pour les institutions de recherche et les entreprises privées, avec une croissance accrue gr'ce à ce nouvel accord de distribution. Contact Lauren Nagel Spécialiste en marketing technique lauren.nagel@tytorobotics.com 514-603-2706 À propos de Tyto Robotics Tyto Robotics est une entreprise aérospatiale canadienne spécialisée dans le développement d'outils de test professionnels pour la conception des drones et véhicules aériens électriques. Fondée en 2014, la société fabrique plusieurs variétés de bancs d'essai qui caractérisent pleinement les moteurs et hélices brushless pour drones et avions eVTOL. L'équipement de test et le logiciel mesurent avec précision la poussée, le couple, la puissance et l'efficacité afin que les concepteurs de drones puissent optimiser leurs systèmes de propulsion pour des performances maximales. https://www.tytorobotics.com/ À propos de WindShape WindShape développe une technologie de simulation météorologique intérieure pour tester les drones dans des conditions de vol contrôlables et reproductibles. Fondée en 2016 en Suisse, la société a inventé un générateur de vent innovant, appelé WindShaper, capable de générer une variété infinie de profils de vent à travers des milliers de pixels de vent (ventilateurs). Avec sa conception de section de test ouverte, cette technologie permet d'étudier les drones en vol libre, tout en surveillant leur comportement et en évaluant leurs performances dans diverses conditions, y compris les rafales, la pluie et même la neige. L'objectif de WindShape est d'améliorer les capacités actuelles de test et de certification des drones pour permettre des applications autonomes et évolutives. www.windshape.com

  • L'US Army développe un concept innovant de collaboration drones – robots

    December 17, 2020

    L'US Army développe un concept innovant de collaboration drones – robots

    Afin d'accroître l'endurance et la portée de ses drones, l'US Army entend faire collaborer des essaims aériens et terrestres. Des robots pour recharger des drones. L'US Army se penche actuellement sur un concept innovant visant à faire collaborer drones et robots et ainsi accroître les performances de ses essaims de drones. Afin de pouvoir augmenter les capacités des drones déployés au sein de l'essaim, ces derniers se rendront au sol et se poseront sur des robots, qui leur serviront de plateformes de chargement. Une idée astucieuse afin de considérablement augmenter la portée et l'endurance de ces petits aéronefs. Algorithmes et intelligence artificielle. Afin de conduire ce projet, le laboratoire de recherche de l'US Army a notifié à l'université d'Illinois un accord portant sur 4 ans et un budget de recherche de 8M$. L'enjeu est notamment de pouvoir définir une intelligence artificielle assez performante afin que les drones puissent se poser en toute sécurité sur les robots au sol, et que ces derniers parviennent à suivre les aéronefs en vol. Néanmoins, de nombreux aspects sont à prendre en compte eut égard à l'environnement opérationnel dans lequel ces drones seront déployés. Ils devront conserver leur discrétion, tout en évitant les potentiels obstacles, puisque toute la manœuvre sera réalisée de façon automatique. L'aspect essaim sera également à gérer car l'ambition est de pouvoir mener une mission en continu. Il faudra donc faire alterner les drones dans les phases de chargement afin qu'il n'y ait pas d'interruption de missions. Libérer la charge mentale du soldat. A travers ce projet, l'objectif est également de soulager les soldats, aussi bien d'un point de vue opérationnel que logistique. Les militaires n'auront plus à se charger du pilotage du drone ni à gérer le niveau et le remplacement des batteries. L'ensemble se fera automatiquement et permettra aux opérationnels de se concentrer sur des t'ches à haute valeur ajoutée. https://www.air-cosmos.com/article/lus-army-dveloppe-un-concept-innovant-de-collaboration-drones-robots-23979

  • Additive Technologies For Future UK Air Power Advance

    July 10, 2020

    Additive Technologies For Future UK Air Power Advance

    Tony Osborne July 10, 2020 Bidders pushing for a role to build a technology demonstrator for the UK's Lightweight Affordable Novel Combat Aircraft (LANCA) are waiting to see if their design proposals will be approved for the next phase of the initiative. Three industry teams were selected last summer (AW&ST July 29-Aug. 18, 2019, p. 18) to take forward development of the LANCA air system, an unmanned air vehicle that could act as additive capability accompanying future combat aircraft into operations. LANCA would perform a range of tasks, including serving as a loyal wingman, gathering intelligence or acting as a weapons carrier. The Royal Air Force envisions a platform costing 1/10th of current combat aircraft and developed in one-fifth of the time. The idea is like that of the Kratos XQ-58 Valkyrie for the U.S. Air Force's Skyborg program, Australia's Boeing-led Airpower Teaming System and remote carriers for the French, German and Spanish Future Combat Air System. Since then, the industry teams—which include Boeing Phantom Works International, working with Marshall Aerospace and Defence Group and Cranfield University; consortium Team Black Dawn, Callen-Lenz and Bombardier Belfast; and Northrop Grumman UK with Team Avenger, led by Blue Bear Systems Research and yet to be disclosed partners—submitted their proposals for the £4.8 million ($6 million) Phase 1. The LANCA program is being led by the UK Defense Science and Technology Laboratories in conjunction with the Royal Air Force's Rapid Capability Office. The UK Defense Ministry is evaluating proposals in readiness for the second phase of the project, called Mosquito, which is worth £30-50 million. Mosquito would see one, possibly two of the candidates being matured into a full-size flightworthy demonstrator potentially undertaking a flight-test program. Aviation Week has been told there was stiff competition for the LANCA program: Some 45 bidders entered Phase 1 and were subsequently scaled down to nine. Around eight bids were then tendered, of which three were chosen. Few details have emerged about the proposals, although Boeing Australia confirmed through social media that it had secured a “first-of-type permit” from the Australian government to share design material for its Airpower Teaming System with the UK, suggesting the Boeing proposal may borrow heavily from that platform. Progress is also occurring on a drone swarm system announced by former Defense Secretary Gavin Williamson in February 2019: Demonstrations in March using five unmanned air vehicles proved a collaborative capability between the platforms, people close to the program told Aviation Week. https://aviationweek.com/ad-week/additive-technologies-future-uk-air-power-advance

All news