Un sistem de inteligență artificială unic ajută persoanele cu deficiențe de auz să lucreze

Un sistem de inteligență artificială unic ajută persoanele cu deficiențe de auz să lucreze

Reading Time: 3 minute

Un nou instrument dezvoltat la Universitatea Norvegiană de Știință și Tehnologie (NTNU) folosește inteligența artificială, feedback haptic și ghidare vizuală pentru a promova incluziunea în mediile industriale.

Un sistem inovator, unic în lume, creat la NTNU ar putea redefini modul în care este abordată incluziunea în sectorul industrial. Sistemul de ajutor, destinat persoanelor surde și cu deficiențe de auz, este conceput pentru a îmbunătăți participarea acestora în muncile industriale, prin combinarea siguranței, comunicării și instruirii într-un instrument portabil asistat de inteligență artificială.

Karin Sofie Syversveen Lie a dezvoltat, în cadrul tezei sale de masterat, un sistem asistiv bazat pe inteligență artificială în timp real, destinat sprijinirii persoanelor DHH în sarcini de asamblare industrială, dar și a lucrătorilor din medii cu nivel ridicat de zgomot. Conceptul este descris în teza sa, intitulată Communicating Beyond Sound, care prezintă un sistem portabil ce integrează viziune computerizată, transcriere vocală în timp real și ghidare vizuală a sarcinilor, oferind lucrătorilor hipoacuzici mai multă autonomie, conștientizare a mediului și capacitate de comunicare pe linia de producție.

„Din câte știm, acesta este primul sistem care combină alertele haptice, transcrierea vocală în timp real bazată pe AI și instrucțiuni vizuale de asamblare într-un singur instrument asistiv dedicat persoanelor cu hipoacuzie din industrie,” a declarat Karin Syversveen Lie. „Este un pas către un viitor al muncii mai incluziv, în care nimeni nu este lăsat pe dinafară din cauza barierelor senzoriale.”

Un nou standard pentru industria incluzivă

Sistemul a fost dezvoltat în cadrul proiectului SkillAIbility, finanțat prin programul Horizon Europe, și reprezintă un prototip în stadiu incipient de asistență industrială bazată pe AI, orientată către incluziune.

Prototipul include:

• O centură cu vibrații, acționată de viziune computerizată, care notifică utilizatorul atunci când o persoană se apropie din stânga sau din dreapta, îmbunătățind siguranța și conștientizarea spațială.
• Un modul de transcriere vocală în timp real, bazat pe modelul Whisper de la OpenAI, care permite interpretarea instrucțiunilor vocale chiar și în medii industriale zgomotoase.
• O interfață web de instruire care oferă asistență vizuală intuitivă, fără a se baza pe audio sau text scris.

Testat cu participanți care au simulat pierderea auzului în medii industriale, sistemul a primit evaluări pozitive de utilizabilitate și un grad ridicat de încredere, în ciuda faptului că este un prototip aflat la început de drum. Recent, sistemul a fost testat și de o persoană surdă într-un cadru de laborator, care a confirmat utilitatea acestuia și a oferit feedback valoros pentru îmbunătățire.

„Acest sistem are potențial,” a declarat Davy Van Landuyt, manager de proiect la Uniunea Europeană a Persoanelor cu Deficiențe de Auz, care a testat sistemul. „Cu mai multe iterații și feedback din partea lucrătorilor surzi și cu deficiențe de auz în medii reale, ar putea deveni un instrument util în activitatea zilnică din industrie.”

Răspuns la o nevoie în creștere

Această inovație vine într-un moment critic: persoanele surde și cu deficiențe de auz constituie un grup puternic subreprezentat. La nivel global, peste 5% din populație – aproximativ 430 de milioane de oameni, dintre care 34 de milioane de copii – suferă de pierderea auzului cu impact semnificativ, iar estimările indică faptul că numărul acestora va depăși 700 de milioane până în 2050. Cu toate acestea, locurile de muncă din industrie rămân în mare parte inaccesibile pentru aceste persoane.

Această soluție se integrează direct în obiectivele mai largi ale proiectului SkillAIbility, care explorează modul în care inteligența artificială poate sprijini dezvoltarea incluzivă a competențelor și integrarea profesională a persoanelor cu dizabilități.

Prototipul poate contribui la:

• Dezvoltarea de sisteme asistive bazate pe AI, oferind fluxuri de lucru sigure și accesibile pentru utilizatorii cu hipoacuzie.
• Proiectarea de programe de formare profesională adaptate nevoilor lucrătorilor surzi, cu instrumente care sprijină comunicarea, orientarea și execuția sarcinilor.
• Testări pilot viitoare, desfășurate alături de parteneri industriali, pentru a valida eficiența acestei tehnologii incluzive în condiții reale de producție.

„Ceea ce a construit Karin nu este doar o teză – este un prototip pentru viitorul unei industrii incluzive. Este o dovadă clară că SkillAIbility poate susține inovația care contribuie direct la echitatea în industrie,” a declarat Sotirios Panagou, coordonator academic și cercetător la NTNU.

Sistemul a fost realizat exclusiv cu tehnologii modulare open-source, iar codul sursă complet și documentația sunt disponibile public pe GitHub, permițând altor echipe să reproducă, adapteze sau îmbunătățească soluția pentru un impact mai larg în industria incluzivă.

Echipa care a contribuit la dezvoltarea prototipului este formată din: Karin Sofie Syversveen Lie, Sotirios Panagou (Logistics 4.0 Lab), Martin Francis Berg & Martin Steinert (TrollLabs), Patrick Mikalef (Departamentul de Informatică de la NTNU, SINTEF Digital).

Soluția se află acum în proces de scalare.