Amerykański Język Migowy (ASL) jest trzecim najczęściej używanym językiem w Stanach Zjednoczonych, jednak narzędzia AI obsługujące ASL pozostają znacznie mniej rozwinięte w porównaniu do języka angielskiego i hiszpańskiego. NVIDIA, American Society for Deaf Children oraz agencja kreatywna Hello Monday dążą do zmniejszenia tej luki dzięki innowacyjnej platformie internetowej Signs, która wspiera naukę ASL i rozwój dostępnych technologii wspomagających komunikację.
Signs to interaktywny zasób edukacyjny, który umożliwia użytkownikom korzystanie ze zweryfikowanej biblioteki znaków ASL z pomocą trójwymiarowego awatara. Ta wirtualna postać prezentuje znaki w sposób czytelny, pomagając użytkownikom w precyzyjnym odwzorowaniu ruchów rąk. Platforma oferuje także narzędzie AI, które analizuje nagrania z kamery internetowej i zapewnia użytkownikom natychmiastową informację zwrotną na temat poprawności ich znakowania. Co więcej, każdy użytkownik – niezależnie od poziomu zaawansowania – może nagrywać swoje wykonania poszczególnych znaków, by w ten sposób przyczynić się do rozwoju obszernej bazy danych ASL.
NVIDIA zamierza w przyszłości powiększyć tę bazę do 400 000 klipów wideo, reprezentujących aż 1000 słów w ASL. Kluczowym elementem tego projektu jest zapewnienie najwyższej jakości zbieranych danych poprzez ich walidację przez doświadczonych użytkowników ASL i certyfikowanych tłumaczy języka migowego. W ten sposób powstanie wysokiej klasy wizualny słownik oraz skuteczne narzędzie edukacyjne, które pomoże zarówno osobom uczącym się języka migowego, jak i profesjonalistom pracującym nad rozwojem technologii ułatwiających komunikację.
Projekt ma kluczowe znaczenie szczególnie dla rodzin dzieci niesłyszących, ponieważ większość z nich rodzi się w środowisku słyszących rodziców. Możliwość rozpoczęcia nauki ASL na wczesnym etapie życia, za pomocą platformy takiej jak Signs, może znacząco poprawić komunikację między dziećmi a ich najbliższymi już od szóstego miesiąca życia. Według Cheri Dowling, dyrektor American Society for Deaf Children, świadomość, że wszystkie znaki na platformie zostały zatwierdzone przez wykwalifikowanych nauczycieli ASL, daje użytkownikom pewność, że uczą się autentycznego języka.
Zgromadzone dane zostaną również wykorzystane do opracowania nowych aplikacji AI, które będą niwelować bariery komunikacyjne pomiędzy społecznością niesłyszących a osobami słyszącymi. W publicznym dostępie znajdzie się obszerna baza danych, która może zostać wykorzystana do tworzenia nowoczesnych technologii, takich jak cyfrowi asystenci, oprogramowanie do wideokonferencji czy interaktywne awatary wspierające komunikację migową w czasie rzeczywistym.
Chociaż Signs skupia się obecnie na nauce podstawowej struktury znaków, w kolejnych etapach rozwoju planowane jest uwzględnienie dodatkowych aspektów języka migowego, takich jak wyraz twarzy i ruchy głowy, które niosą istotne znaczenie w komunikacji ASL. Twórcy platformy analizują także regionalne warianty gestów oraz slang, aby zapewnić jak najszerszy zakres słownictwa. We współpracy z naukowcami z Rochester Institute of Technology’s Center for Accessibility and Inclusion Research trwają również badania nad udoskonaleniem interfejsu użytkownika, aby platforma była jak najbardziej intuicyjna dla osób niesłyszących i niedosłyszących.
Projekt Signs stanowi kolejny krok w kierunku bardziej dostępnych technologii opartych na sztucznej inteligencji, mających na celu przełamywanie barier komunikacyjnych. Wcześniej ta sama ekipa twórcza opracowała aplikację Fingerspelling.xyz, która uczyła użytkowników alfabetu ASL. Signs jest jednak znacznie bardziej zaawansowaną inicjatywą, oferującą aktywne wsparcie dydaktyczne i możliwość budowania bazy danych, która w przyszłości może stać się podstawą dla kolejnych innowacyjnych rozwiązań.
Oficjalne udostępnienie zgromadzonych materiałów przewidziane jest na koniec bieżącego roku. Każdy, kto chce rozpocząć naukę ASL lub przyczynić się do rozwoju tej inicjatywy, może już teraz odwiedzić platformę Signs i przetestować jej możliwości.
