Et unikt AI-system, der er udviklet til at styrke døve og hørehæmmede arbejdstagere i produktionsbutikken

  • Et nyt hjælpemiddel, der er udviklet på Norges Universitet for Videnskab og Teknologi (NTNU), anvender kunstig intelligens, haptisk feedback og visuel vejledning til at fremme inklusion på fabriksgulvet. 

Et system som det første af sin art, der er udviklet på Norges Universitet for Videnskab og Teknologi, kunne omdefinere inklusion i fremstillingsindustrien. Hjælpesystemet for døve og hørehæmmede (DHH) er udformet med henblik på at forbedre deltagelsen i industrielt arbejde ved at kombinere sikkerhed, kommunikation og uddannelse i et wearable, AI-støttet værktøj.

Karin Sofie Syversveen Lie har under sin masterafhandling udviklet et AI-drevet hjælpesystem i realtid til støtte for DHH-personer i industriel samling og arbejdstagere i områder med høj industriel støj., en løsning, der er unik i verden. Proof of concept for denne løsning er beskrevet i hendes afhandling med titlen "Kommunikation ud over Øresund". Det indfører et wearable system, der integrerer computersyn, tidstro taletransskription og visuel opgavevejledning, hvilket giver DHH-medarbejdere større uafhængighed, situationsbevidsthed og kommunikationsevne på fabriksgulvet.

"Så vidt vi ved, er dette det første system, der kombinerer haptiske advarsler, AI-drevet live transskription og visuelle monteringsinstruktioner til et enkelt hjælpemiddelværktøj, der er skræddersyet til ansatte inden for beslutningshøjde og hygiejne i fremstillingsindustrien." siger Karin Syversveen Lie. "Det er et skridt i retning af en inklusiv fremtid for arbejdet, hvor ingen lades i stikken på grund af sensoriske barrierer."

En ny standard for inklusiv produktion

Systemet blev udviklet som led i projektet SkillAIbility, der finansieres under Horisont Europa, og udgør en prototype i den tidlige fase for inklusiv, AI-drevet bistand i industrielle miljøer. Prototypen har følgende karakteristika:

  • Et vibrerende bælte, der drives af computersyn til at underrette brugeren, når en person nærmer sig fra venstre eller højre, hvilket øger sikkerheden og den rumlige bevidsthed.
  • Et tale-til-tekst-modul baseret på OpenAI's Whisper-model muliggør tidstro transskription af talte instruktioner i støjende miljøer.
  • En webbaseret uddannelsesgrænseflade yder intuitiv opgavesupport uden at være afhængig af lydinstruktioner eller skriftlige instruktioner.

Systemet blev testet med deltagere, der simulerede høretab i et industrielt miljø, og fik positive brugervurderinger og stærk brugertillid på trods af begrænsningerne ved prototypefremstilling i den tidlige fase. For nylig blev systemet også testet i et laboratorium af en døv deltager, som bekræftede dets nytteværdi og gav værdifuld feedback med henblik på videreudvikling.

"Dette system har potentiale." sagde Davy Van Landuyt, projektleder i Den Europæiske Døveunion, som testede systemet. "Med mere iteration og feedback fra døve og hørehæmmede arbejdstagere i virkelige miljøer under udviklingen kan det blive nyttigt for det daglige arbejde i industrielle miljøer."

Imødekommelse af et voksende behov

Innovationen kommer på et afgørende tidspunkt: personer, der er DHH, udgør en særlig underbetjent gruppe. Globalt set over 5% af befolkningen oplever ca. 430 millioner mennesker, herunder 34 millioner børn, invaliderende høretab, og fremskrivninger viser, at dette tal vil overstige 700 millioner i 2050. Industrielle arbejdspladser er dog fortsat i vid udstrækning utilgængelige for hørehæmmede.

Innovationen passer direkte ind i det bredere projekt om færdigheder, som undersøger, hvordan kunstig intelligens kan støtte inklusiv opkvalificering, omskoling og integration på arbejdspladsen for personer med handicap.

Prototypen kan bidrage til:

  • Udvikling af AI-understøttede hjælpesystemer i SkillAIbility's læringsfabriksmiljøer, der muliggør sikre og tilgængelige arbejdsgange for DHH-brugere.
  • Udformning af erhvervsuddannelsesprogrammer, der er skræddersyet til døve arbejdstageres behov, og som tilbyder værktøjer, der støtter kommunikation, situationsbevidsthed og opgaveudførelse.
  • Fremtidige pilotudrulninger på tværs af industrielle partnere for at validere effektiviteten af inklusiv teknologi under reelle produktionsforhold.

"Det, som Karin har opbygget, er mere end en afhandling, det er en prototype for fremtiden for inklusiv industri. Dette arbejde er et reelt eksempel på, hvordan færdigheder kan støtte innovation, der direkte forbedrer ligheden i industrien." sagde Sotirios Panagou, akademisk vejleder og forsker ved NTNU.

Systemet blev bygget fuldt ud med modulopbyggede open source-teknologier, og den fulde kildekode og dokumentation er offentligt tilgængelig på GitHub, hvilket giver andre mulighed for at kopiere, tilpasse eller bygge videre på løsningen med henblik på en bredere indvirkning på inklusiv produktion.

Det team, der var en del af prototypeudviklingen, består af: Karin Sofie Syversveen Lie, Sotirios Panagou (Logistics 4.0 Lab), Martin Francis Berg & Martin Steinert (TrollLabs), Patrick Mikalef (afdelingen for computervidenskab i NTNU, SINTEF Digital).

Løsningen er nu ved at blive opskaleret.

Om færdigheder

Skjulelighed er et Horisont Europa-forskningsprojekt til 3 mio. EUR, der fremmer menneskecentrerede tilgange til kunstig intelligens og automatisering inden for fremstilling og samler 14 førende organisationer i 9 europæiske lande. Projektet vil udvikle nye måder, hvorpå mennesker og maskiner kan arbejde effektivt sammen, samtidig med at arbejdstagernes trivsel sættes i første række, hvilket er et udtryk for Den Europæiske Unions Industri 5.0-vision. Dette initiativ fokuserer på at fremme samarbejdet mellem mennesker og kunstig intelligens inden for fremstilling for at skabe mere inklusive og bæredygtige arbejdspladser. SKILLAIBILITY-projektet har modtaget støtte fra Den Europæiske Unions Horisont Europa-program for forskning og innovation i henhold til tilskudsaftale nr. 101177783. De synspunkter og holdninger, der kommer til udtryk her, er udelukkende afsenderens/afsendernes og afspejler ikke nødvendigvis Den Europæiske Unions holdning. Hverken Den Europæiske Union eller den tildelende myndighed kan holdes ansvarlig herfor. Dette arbejde har modtaget støtte fra det schweiziske statssekretariat for uddannelse, forskning og innovation (SERI). 

Om NTNU

Norges Universitet for Videnskab og Teknologi (NTNU) er Norges førende universitet inden for teknologi og ingeniørvidenskab. Med et stærkt fokus på innovation og bæredygtighed samarbejder NTNU med industrien, den offentlige sektor og samfundet om at skabe viden med henblik på en bedre verden. Læs mere på www.ntnu.edu.

Hold dig opdateret

tilmeld dig vores nyhedsbrev