Geavanceerde displays, oog- en gebarentracking en AI om de besluitvorming te vergemakkelijken
Gevechtsvliegtuigen opereren in steeds sterker geconnecteerde omgevingen. Piloten moeten daarbij steeds meer informatie verwerken en interageren met onbemande systemen. ACE4ACES ontwikkelt multimodale cockpitinterfaces om deze werklast te verminderen en de besluitvorming te vergemakkelijken. Het project combineert geavanceerde displays, oog- en gebarentracking en AI-ondersteunde communicatie.
Doelgroep
Het project richt zich voornamelijk op:
- Bedrijven in de luchtvaart- en defensiesector
- Vliegtuigbouwers en leveranciers van avionicasystemen
- Ontwikkelaars van technologieën voor cockpits en mens-machine-interfaces
- Bedrijven gespecialiseerd in displays, sensoren, AI en communicatiesystemen
Context
Luchtoperaties worden steeds sterker geconnecteerd en steeds complexer. Bemande vliegtuigen, onbemande systemen en andere platformen moeten in realtime steeds meer informatie uitwisselen. Piloten moeten deze verschillende datastromen interpreteren en prioriteren om snel de juiste beslissingen te kunnen nemen.
De huidige interfaces bereiken door deze toenemende complexiteit hun grenzen . Nieuwe vormen van interactie zijn nodig om relevante informatie op het juiste moment te presenteren. Tegelijk moeten deze interfaces voldoen aan strenge eisen op het vlak van betrouwbaarheid, veiligheid, latentie en beschikbaarheid.
Doelstelling & resultaten
Het project heeft als doel om:
- Het situationeel bewustzijn en informatiebeheer te verbeteren
- De interactie tussen piloten, boordsystemen en onbemande systemen te vergemakkelijken
- De ontwikkelde technologieën te demonstreren en te evalueren op Technology Readiness Level 4 (TRL 4)
Verwachte resultaten:
- Een prototype van een augmentedrealitydisplay dat op een helm wordt gemonteerd en holografische technologie, oogtracking en gebareninteractie combineert
- Een fouttolerant grootformaatdisplay dat verschillende interactievormen integreert
- Verbeterde technologieën voor oog-, hoofd- en gebarentracking
- AI-ondersteunde oplossingen voor het verwerken en prioriteren van communicatie- en datastromen
- Demonstratoren om de technologieën in verschillende scenario's voor mens-machine-interactie te evalueren
- Technologieën die niet onder ITAR-beperkingen vallen en bijdragen aan de Belgische en Europese technologische soevereiniteit
- Publicaties en workshops om de projectresultaten te delen
Aanpak
ACE4ACES brengt Belgische partners samen met expertise in displays, sensoren, artificiële intelligentie, communicatie en toegepast onderzoek. Het project focust op drie complementaire technologiedomeinen.
1. Geavanceerde cockpitdisplays
De partners ontwikkelen een fouttolerant grootformaatdisplay met hoge resolutie. Daarnaast onderzoekt het project een augmentedrealitysysteem voor helmmontage. Dit systeem maakt gebruik van holografische displaytechnologie met meerdere focusvlakken, een breed gezichtsveld en een hoge helderheid.
2. Interactie via oog- en gebarentracking
Het project onderzoekt oog- en hoofdtracking en event-based sensoren om snelle, contactloze interactie mogelijk te maken. Het onderzoek focust vooral op nauwkeurigheid, robuustheid, latentie en de vereiste rekenkracht.
3. AI-ondersteunde communicatie
Natuurlijke taalverwerking en intelligente dataprioritering worden ingezet om communicatie- en datastromen op basis van hun context en relevantie te selecteren, te verbeteren en gesproken communicatie te transcriberen.
Deze technologieën worden geïntegreerd in demonstratoren en geëvalueerd aan de hand van verschillende scenario's voor mens-machine-interactie.
Bent u actief in de luchtvaart- of defensiesector of werkt u rondgeavanceerde mens-machine-interfaces?
Neem contact op met onze expert om de technologieën binnen ACE4ACES te ontdekken en samenwerkingsmogelijkheden te verkennen.
Financiering
- Financieringsinstantie: Royal Higher Institute for Defence (RHID)
- Projecttype: Generation Next Technologies – NGCAT
- Totaalbudget: € 6.433.400
- Bijdrage van RHID: € 5.985.000






