Migający awatar i tłumacz dla głuchoniemych. Poznaj technologię znoszącą bariery

Nie słyszą, a grają jak z nut
Nie słyszą, a grają jak z nut
TVN 24
Nie słyszą, a grają jak z nutTVN 24

Za kilka lat problem komunikacyjny z osobami niesłyszącymi może zupełnie zniknąć. Wszystko za sprawą nowoczesnych technologii, które powstają w Polsce, ale zachwycają już cały świat.

Na świecie żyje 70 mln niesłyszących osób, w Polsce około 470 tys. osób. Projekty, które powstają także nad Wisłą mogą sprawić, że te osoby nie tylko będą miały dużo łatwiejsze życie, ale także pomogą w komunikacji całej reszcie słyszących. To ogromny rynek urządzeń i aplikacji, które mogą znaleźć zastosowanie w urzędach, bankach, sklepach, czy gabinetach lekarskich. A właściwie wszędzie tam, gdzie pojawiają się niesłyszący.

Dziki kraj?

Sławek Łuczywek i Przemek Kusimierek, twórcy Migam.pl, którą zachwycił się sam sir Richard Branson, miliarder i założyciel Virgin Group pracę nad rozwiązaniami mającymi pomóc niesłyszącym zaczęli kilka lat temu.

- Wszystko zaczęło się od tego, że do Polski przyjechali nasi niesłyszący znajomi ze Stanów Zjednoczonych. Kiedy dowiedzieli się, jak wygląda u nas pomoc osobom niesłyszącym, jak mało się dla nich robi, że nie było żadnej ustawy skierowanej do nich, to stwierdzili, że żyjemy w dzikim kraju – opowiadają twórcy.

Wtedy młodzi twórcy wpadli na pomysł, aby to zmienić. Teraz w ich warszawskim biurze powstaje system, który może zmienić życie 70 mln ludzi na całym świecie. Dotąd twórcy Migam.pl stworzyli już program tłumaczący filmy na język migowy, czy obszerny słownik języka migowego. – Jest dość popularny. Korzysta z niego ponad 150 tys. osób – mówi Przemek Kusimierek.

Jednak słownik był dopiero pierwszym etapem większego projektu, bo teraz młodzi twórcy pracują nad automatycznym tłumaczem języka migowego. Aby zrozumieć jego działanie trzeba wiedzieć, że osoba niesłysząca ma swój język migowy, który jest zupełnie inny niż język polski chociażby pod względem gramatycznym, składni i myślenia.

Jak to działa?

Automatyczny tłumacz języka migowego będzie tłumaczyć wszystkie języki migowe na języki pisane i mówione i na odwrót. Dodatkowo system przełoży daną kwestię na języki obce włoski, angielski, hiszpański oraz migowe: amerykański (ASL) i polski (PJM) - bo tu też występują różne mutacje języka migowego. Potrafi też rozpoznać migane słowa, a także nauczyć się nowych znaków. Aplikację można zainstalować na komputerze, czy laptopie.

- Wraz z nową wersją, która pomoże nam dokładniej zbierać dane będziemy projektować naszego automatycznego tłumacza na urządzenia mobilne, czyli np. smartfony i tablety – zdradza plany Sławek Łuczywek. - Chcemy, aby za około pięć lat nasza technologia była włączona do urządzenia GoogleGlass. Dzięki temu zniknie problem komunikacyjny, bo każda osoba zainteresowana rozmową w języku migowym, bądź mówionym będzie mogła skorzystać z naszej aplikacji – wyjaśnia Łuczywek.

Opracowywany przez Migam.pl system pomoże niesłyszącym w codziennym życiu, gdy np. będą chcieli załatwić jakąś sprawę w urzędzie. Wystarczy z aplikacją wgraną na telefon pójdzie do urzędu i bez pomocy tłumacza, którego dziś w większości przypadków trzeba wcześniej umawiać, samodzielnie dogada się z urzędnikami.

Z podobnym problemem niesłyszący spotykają się chociażby w sklepach ze sprzętem AGD i RTV. - Z systemu będą mogły skorzystać też firmy, które chcą sprzedać swoją usługę, bądź produkt osobie niesłyszącej. Z naszą aplikacją zrobią to bez problemu, bo system działa w obie strony – tłumaczy Sławek Łuczywek. – Osoby niesłyszące są wszędzie. Mają takie same potrzeby jak słyszące, więc gdy chcą dokonać np. zakupu pralki, czy wziąć kredyt to napotykają barierę komunikacyjną. Nasz system to zmienia i ją burzy – dodaje.

Zachwyt świata

Automatyczny tłumacz zdobywa uznanie za granicą. W lecie ubiegłego roku zwyciężył w konkursie Virgin Academy, gdzie pokonał 4,5 tys. konkurentów z całego świata, a brytyjska organizacja Nominet Trust umieściła Migam.pl w setce najważniejszych projektów internetowych, które mają wpływ na społeczeństwo. Warto wspomnieć, że obok nich znalazły się tam choćby cyfrowe pieniądze bitcoiny, czy przeglądarka internetowa Mozilla Firefox.

- Ogłoszenie przez Bransona tego, ze wygraliśmy otworzyło nam furtkę do otrzymania innych nagród i bardzo nam pomogło pod względem rozpoznawalności, byliśmy np. w Stanach, w programie akceleracyjnym zorganizowanym przez AIP Warszawa. Zaczęliśmy pozyskiwać klientów dużych i małych. Z kilkoma już jesteśmy w zaawansowanych rozmowach – twierdzi Kusimierek i dodaje, że twórcy Migam.pl dotąd zainwestowali w rozwój projektu około 2 mln złotych.

– To pieniądze z różnych źródeł: PFERON-u, Microsoftu, Virgin Mobile, czy od klientów. Zakładamy, że poziom rentowności osiągniemy w czerwcu, najpóźniej w lipcu tego roku – dodaje.

Czytanie z ruchu warg

Życie głuchoniemych może ułatwić też aplikacja Arkadiusza Chmielewskiego i Mariusza Stebelskiego z firmy Innovation Technologies. Ich projekt „Mimiczne usta” zainstalowany na komputerze pozwala nie tylko oglądać filmy, czy surfować po Internecie, ale także uczyć osoby głuchonieme, głuche i niedosłyszące czytania z ruchu warg wirtualnego awatara. Jeśli na ekranie laptopa, czy komputera pojawi się tekst twarz awatara będzie odczytywała go wiernie zachowując ludzką mimikę twarzy i ruchy warg.

Wprawdzie aplikację stworzono z myślą o osobach głuchoniemych, ale używać jej może właściwie każdy, także słyszący. Pozwala ona w szybki i przyjemny sposób nabyć umiejętność czytania z ruchu warg i nauczyć się języka migowego. Warto podkreślić, że program dostosuje się do użytkownika w zależności od jego schorzenia. Zatem skorzystają na nim zarówno osoby, które straciły słuch w wypadku, czy niesłyszący od urodzenia.

System stworzony przez Innovation Technologies można być używany wszędzie, gdzie osoba głuchoniema może mieć problem z komunikowaniem się, czyli np. w urzędach, bankach, czy sklepach.

- Proszę sobie wyobrazić taką sytuację. Osoba, która potrafi już czytać z ruchu ust, nie potrzebuje już tłumacza języka migowego, bo sama potrafi odczytać to, co się do niej mówi. Co więcej, jeśli nawet nie słyszy własnych słów, wypowiada je wyraźniej tak, że druga osoba jest w stanie zrozumieć jej przekaz. Okazuje się, że dzięki aplikacji głuchoniemy może dogadać się w społeczeństwie sam, bez osób trzecich. Zaoszczędził tym czas i często uniknął niepotrzebnego stresu – mówi Mariusz Stebelski, współtwórca aplikacji „Mimiczne usta”.

Programu początkowo będzie można używać na komputerach i laptopach z systemem operacyjnym Windows. Jego twórcy zapowiadają jednak, że zostanie też dopasowany do urządzeń Apple’a i zintegrowany z urządzeniami mobilnymi Android i iOS.

Prace nad „Mimicznymi ustami” mają potrwać jeszcze dwa lata. W tym czasie zespół przeprowadzi badania, które pozwolą stworzyć realistyczną animację wszystkich ruchów mimicznych twarzy. To bardzo ważne, bo niektóre słowa „wyglądają” podobnie. – Chodzi o to, że kształt ust jest bardzo zbliżony, aby ułatwić użytkownikom korzystanie z aplikacji należy też czytać z ruchów szyi i innych części twarzy, które zdradzają faktycznie przekazywane treści – wyjaśnia Stebelski.

Potrzeba inwestora

Twórcy aplikacji szukali finansowego wsparcia z pomocą serwisu crowdfundingowego Indiegogo. – Zbiórka trwa do 21 kwietnia, ale niestety nie uda nam się zebrać kwoty, która pozwoli nam zakupić potrzebny, do badań i analizy mimicznych ruchów, sprzęt. Dlatego szukamy inwestorów i sponsorów, którzy pomogą nam zrealizować projekt – mówi Stebelski i zachęca zainteresowane firmy do kontaktu. – Chętnie usiądziemy do negocjacji – zapewnia.

Pieniądze twórcom przydadzą się, bo aby ich aplikacja zaczęła pomagać niesłyszącym potrzeba jeszcze serii testów i badań. - System można rozwinąć m.in. o większą bazę mimiczną, czy technologię wprowadzania mimiki do komputera i tworzenie modelu 3D – wylicza Stebelski. - Jeśli uda nam się zebrać fundusze, to ruszymy z grubej rury – zapewnia.

Kosmiczna rękawica

Zupełnie inną drogą poszedł zespół projektantów z Ukrainy, który stworzył rękawicę umożliwiającą przełożenie języka migowego na werbalny. Kiedy ich wynalazek o nazwie „EnableTalk” ujrzał światło dziennie został uznany za ten, który na zawsze zmieni i usprawni komunikację głuchoniemych.

- Chcieliśmy przede wszystkim pomóc naszym przyjaciołom, którzy mają problem ze słuchem i zaburzeniami mowy tak, aby mieli możliwość komunikowania się jak wszyscy - mówi programista i jeden z twórców Maxim Osika.

Specjalna rękawica jest wyposażona w sieć czujników, które rozpoznają każdy ruch rąk i dłoni. Kiedy osoba posługująca się językiem migowym wykonuje ruch, to komputer natychmiast zapamiętuje go i przetwarza na słowa języka mówionego. Co ważne twórcy „EnableTalk” zadbali, aby ich wynalazek tłumaczył wykonane ruchy i gesty także na języki obce.

System działa zarówno na stacjonarnych komputerach, przenośnych laptopach, a ostatnio nawet na smartfonach. Wystarczy, że na wybranym przez nas sprzęcie zainstalujemy wymaganą aplikację. Projekt rękawicy nagrodził już Microsoft przyznając laur Imagine Cup za promowanie innowacyjnych technologii, które mają polepszać jakość życia. Co ważne opracowany przez ukraiński zespół produkt nie jest drogi. Jego rynkowa cena to około 75 dolarów.

Autor: Marek Szymaniak//gry / Źródło: TVN24 Biznes i Świat.pl

Źródło zdjęcia głównego: shutterstock.com

Pozostałe wiadomości

Wielka Brytania ogłosiła nałożenie sankcji zarówno na trzy jednostki Sztabu Generalnego Sił Zbrojnych Federacji Rosyjskiej (GRU), jak i oficerów tej instytucji. Polskie Ministerstwo Spraw Zagranicznych wydało komunikat w związku z działaniami Londynu.

MSZ: Polska wyraża solidarność z Wielką Brytanią

MSZ: Polska wyraża solidarność z Wielką Brytanią

Źródło:
PAP

W piątkowym losowaniu Eurojackpot nie odnotowano głównej wygranej, a kumulacja rośnie do 420 milionów złotych. W Polsce najwyższe byłe wygrane czwartego stopnia. Oto liczby, które wylosowano 18 lipca 2025 roku.

Potężna kumulacja w Eurojackpot

Potężna kumulacja w Eurojackpot

Źródło:
tvn24.pl

"Indie nie popierają jednostronnych sankcji" - podkreślił rzecznik indyjskiego resortu spraw zagranicznych Randhir Jaiswal. W ten sposób odniósł się do sankcji nałożonych przez Unię Europejską na Rosję, które obejmują największą rafinerię ropy rosyjskiego koncernu Rosnieft w indyjskim stanie Gudźarat.

Reakcja na ruch Unii Europejskiej. "Nie popierają jednostronnych sankcji"

Reakcja na ruch Unii Europejskiej. "Nie popierają jednostronnych sankcji"

Źródło:
PAP

PKO BP, Santander, ING Bank Śląski, mBank i BNP Paribas - klienci tych instytucji finansowych muszą liczyć się z utrudnieniami w najbliższych dniach. Mogą wystąpić problemy z serwisem internetowym, aplikacją czy płatnościami.

Największy bank ostrzega. "Utrudnienia w dostępie do usług"

Największy bank ostrzega. "Utrudnienia w dostępie do usług"

Źródło:
tvn24.pl

W porównaniu do minionego roku większość owoców była w czerwcu wyraźnie droższa - mówi TVN24+ Kamil Łuczkowski, ekonomista z zespołu analiz makroekonomicznych Banku Pekao. Królem wzrostu cen okazały się jabłka. - Inaczej kształtowała się sytuacja na rynku warzyw. Tu Główny Urząd Statystyczny odnotował spadek cen detalicznych - mówi z kolei Mariusz Dziwulski, analityk rynku rolno-spożywczego w PKO BP. Jednak, jak zaznacza, są wyjątki. Ceny kapusty w hurcie wzrosły w skali roku o ponad połowę.

Król i królowa wzrostu cen

Król i królowa wzrostu cen

Źródło:
TVN24+

Policja przeprowadziła przeszukanie w rezydencji i w siedzibie partii Jaira Bolsonaro. Były prezydent Brazylii jest oskarżony o przygotowywanie zamachu stanu. Sąd nakazał mu noszenie elektronicznej bransoletki i zabronił używania mediów społecznościowych.

Przeszukanie w rezydencji i siedzibie partii byłego prezydenta

Przeszukanie w rezydencji i siedzibie partii byłego prezydenta

Źródło:
PAP, CNN

Wielka Brytania nałożyła nowe sankcje na ponad 20 rosyjskich szpiegów, hakerów i jednostki wywiadu. Chodzi o osoby i podmioty oskarżone o operacje cybernetyczne zagrażające stabilności Europy - wskazał brytyjski rząd w oświadczeniu.

"Szpiedzy GRU prowadzą kampanię mającą na celu destabilizację Europy"

"Szpiedzy GRU prowadzą kampanię mającą na celu destabilizację Europy"

Źródło:
PAP

Wielki sukces polskiego programisty. Przemysław Dębiak zajął pierwsze miejsce w prestiżowych zawodach AtCoder World Tour Finals 2025, pokonując nie tylko wszystkich pozostałych zawodników, ale też sztuczną inteligencję.

Polak lepszy od sztucznej inteligencji. Osobiste gratulacje od szefa OpenAI

Polak lepszy od sztucznej inteligencji. Osobiste gratulacje od szefa OpenAI

Źródło:
tvn24.pl

Od 14 sierpnia przyjmowane będą wnioski od firm i instytucji, które chcą uczestniczyć w prowadzonym przez resort pracy pilotażu skróconego czasu pracy. To pierwszy taki program w tej części Europy i pierwszy na tak szeroką skalę w Polsce – wskazała ministra rodziny, pracy i polityki społecznej Agnieszka Dziemianowicz-Bąk.

Krócej w pracy. "Wielki, pierwszy w tej części Europy, pilotaż"

Krócej w pracy. "Wielki, pierwszy w tej części Europy, pilotaż"

Źródło:
PAP

Bat Indiany Jonesa został sprzedany za 525 tysięcy dolarów na trwającej przez tydzień aukcji firmy Heritage Auctions. Harrison Ford posługiwał się słynnym rekwizytem w filmie "Indiana Jones i ostatnia krucjata" z 1989 roku.

Bat Indiany Jonesa sprzedany na aukcji

Bat Indiany Jonesa sprzedany na aukcji

Źródło:
PAP

W projekcie budżetu opracowanym przez Komisję Europejską przewidziano dla Polski ponad 123 miliardy euro, między innymi na politykę spójności i rolnictwo - wynika z zestawienia opublikowanego przez Komisję Europejską w nocy z czwartku na piątek. Jest to wstępna propozycja budżetu, nad którą będą w kolejnych miesiącach pracować państwa członkowskie.

Ogromne pieniądze dla Polski

Ogromne pieniądze dla Polski

Źródło:
PAP

Wizz Air uruchomi 11 tras z lotniska Warszawa-Modlin, przeniesie też do Modlina dwa samoloty - poinformowała w piątek węgierska linia lotnicza. Wizz Air przestał operować z Modlina pod koniec 2012 roku.

Wizz Air wraca do Modlina. Znamy trasy

Wizz Air wraca do Modlina. Znamy trasy

Źródło:
PAP, tvn24.pl

Należący do koncernu Meta popularny komunikator WhatsApp powinien przygotować się do wycofania z rynku rosyjskiego - oświadczył Anton Goriełkin, wiceprzewodniczący komisji do spraw technologii informatycznych Dumy Państwowej, niższej izby rosyjskiego parlamentu.

Rosja chce się go pozbyć. "Należy do ekstremistycznej organizacji"

Rosja chce się go pozbyć. "Należy do ekstremistycznej organizacji"

Źródło:
PAP

Na Giełdzie Papierów Wartościowych wszystkie główne indeksy rosną. WIG-Banki jest na najwyższym poziomie w historii. "Wszystko wskazuje na to, że obecny rok na warszawskim parkiecie będzie należał do najbardziej zyskownych od wielu lat" - napisał w komentarzu Michał Stanek z Q Value.

Euforia na warszawskiej giełdzie

Euforia na warszawskiej giełdzie

Źródło:
PAP Biznes, tvn24.pl

Bezpośrednie połączenie PKP Intercity do Chorwacji cieszy się sporym powodzeniem. Jak poinformował minister infrastruktury Dariusz Klimczak, do końca wakacji sprzedało się około 11 tysięcy biletów na ten pociąg. A co z połączeniami do Włoch czy Austrii?

Prawie wszystkie bilety sprzedane. Minister wyjaśnia

Prawie wszystkie bilety sprzedane. Minister wyjaśnia

Źródło:
PAP

W pierwszym półroczu 2025 roku deweloperzy sprzedali 18,3 tysiąca mieszkań. To wynik mniejszy o około 10 procent mniejszy niż rok temu przy tym, gdy oferta mieszkań jest na poziomie historycznego maksimum - w sprzedaży jest 62 tysiące lokali. Jak wskazuje Otodom na rynku może pojawić się stagnacja.

"Historyczne maksimum" na rynku mieszkań

"Historyczne maksimum" na rynku mieszkań

Źródło:
PAP

Ja na przykład ostatnio bardzo dużo mówię o Polsce lokalnej i o tym, że potrzeby Polski lokalnej są inne niż Warszawy. Sama jestem warszawianką i patriotką Warszawy, ale uważam, że te rozwiązania z Warszawy, copy-paste na Polskę lokalną, to totalnie nie jest to - powiedziała w programie "Jeden na jeden" w TVN24 ministra funduszy i polityki regionalnej Katarzyna Pełczyńska-Nałęcz (Polska 2050). Broniła w ten sposób poprawek przegłosowanych w Sejmie wspólnie z PiS w sprawie budownictwa społecznego.

"Potrzeby Polski lokalnej są inne". Ministra broni poprawek do ustawy

"Potrzeby Polski lokalnej są inne". Ministra broni poprawek do ustawy

Źródło:
tvn24.pl

Rzeczniczka Białego Domu Karoline Leavitt poinformowała, że dotychczas pisma od prezydenta Donalda Trumpa w sprawie ceł otrzymało 25 krajów. Dodała, że Unia Europejska jest bardzo chętna do negocjacji handlowych, z kolei Kanada to trudny partner do rozmów.

25 krajów otrzymało pisma od Trumpa

25 krajów otrzymało pisma od Trumpa

Źródło:
PAP

Producenci oleju w liście do premiera Donalda Tuska domagają się odblokowania możliwości importu rzepaku z Ukrainy. W ich ocenie niedobór surowca w sezonie 2025/2026 ma wynieść co najmniej 500 tysięcy ton, co negatywnie wpłynie na krajowe tłocznie. Ministerstwo Rozwoju i Technologii poinformowało, że wstrzymuje się jeszcze z decyzjami w tej sprawie.

Sytuacja jest "niezwykle trudna". Apel do premiera

Sytuacja jest "niezwykle trudna". Apel do premiera

Źródło:
PAP, tvn24.pl

Uważam, że obywatelom należy się informacja na temat prawdziwego obrazu sytuacji - powiedział w czwartek na konferencji prasowej minister aktywów państwowych Jakub Jaworowski, odnosząc się do przedstawionego w środę przez posłów Prawa i Sprawiedliwości raportu na temat sytuacji spółek Skarbu Państwa. Jak stwierdził, jest "zszokowany poziomem fałszu i manipulacji" twierdzeń przedstawicieli opozycji.

PiS publikuje raport. Minister: jestem zszokowany poziomem fałszu i manipulacji

PiS publikuje raport. Minister: jestem zszokowany poziomem fałszu i manipulacji

Źródło:
PAP, tvn24.pl

W czerwcu Joanna Tyrowicz, członkini Rady Polityki Pieniężnej, wnioskowała o podwyżkę stóp procentowych o 250 punktów bazowych. Wniosek został jednak odrzucony przez pozostałych członków RPP - poinformował Narodowy Bank Polski.

Propozycja dużej podwyżki stóp procentowych. Wyniki głosowania

Propozycja dużej podwyżki stóp procentowych. Wyniki głosowania

Źródło:
PAP, tvn24.pl