"Oko tukana", czyli biała laska w wersji AI. Produkt Toucan Systems wchodzi na rynek

5 maja 2021, 10:30
Wioletta Kakowska-Mehring

Zaczęli od instalacji multimedialnych, potem były gry, a od kilku lat pracują nad algorytmami, które łamią bariery i są wsparciem dla osób z niepełnosprawnością wzroku. Urządzenie Toucan Eye gdańskiej firmy Toucan Systems właśnie wchodzi na rynek. Kolejny projekt Toucan Assistant - skierowany do seniorów - jest w fazie opracowania.



Czym jest Toucan Eye? To urządzenie, które wspomaga czynności osoby niedowidzącej nieosiągalne wcześniej bez pomocy. Urządzenie obserwuje otoczenie i dzięki analizie obrazu oraz zastosowaniu rozwiązań AI (sztuczna inteligencja) informuje za pomocą mowy np. o godzinach odjazdu środków komunikacji, nazwach ulic, produktach dostępnych w sklepie. Jednocześnie selekcjonuje informacje tak, aby nie zalać danymi z otoczenia. Osoba niedowidząca może skierować urządzenie w konkretne miejsce, np. na kartę dań, która zostanie jej przeczytana. Sprzęt jest wygodny w użyciu, składa się z kamery umieszczonej w nausznej słuchawce połączonej bezprzewodowo z modułem sterującym wielkości smartfona. Moduł zmieści się w torebce czy kieszeni.

Skąd pomysł? Zaczęło się od przypadkowego spotkania i udzielenia pomocy osobie niedowidzącej przez jednego z pracowników spółki Toucan Systems, które kilka lat temu zainspirowało zespół firmy do stworzenia urządzenia, które widzi i mówi. W początkowym zamyśle miał to być aparat do audiodeskrypcji, czyli przekazywania drogą słuchową opisu treści wizualnych. Jednak przed podjęciem prac koncepcyjnych zespół spotkał się z potencjalnymi użytkownikami w Polskim Związku Osób Niewidomych, aby uwzględnić ich realne potrzeby.

- Okazało się, że największym problem jest odnalezienie się w gąszczu informacji dostępnych w przestrzeni publicznej. Odczytanie numeru autobusu, odnalezienie odpowiedniego pokoju w urzędzie czy odszukanie toalety. Stanowi to olbrzymie wyzwanie i wymaga zadawania wielu pytań osobom postronnym. Dzięki naszemu urządzeniu osoby niedowidzące są dużo bardziej samodzielne - wyjaśnia Radosław Zdunek, prezes spółki Toucan Systems.

Zaczęło się od multimediów i gier



Toucan Systems powstał w sierpniu 2012 r. na bazie projektu tworzonego przez dwóch młodych informatyków Radosława Zdunka i Łukasza Łowiec-Wygońskiego. Inspiracją do założenia firmy było pojawienie się technologii interaktywnych, a w szczególności Kinecta. Doceniając pomysły młodych przedsiębiorców, w 2012 r. Fundusz Kapitałowy Agencji Rozwoju Pomorza zainwestował w spółkę Toucan Systems ponad 770 tys. zł.

Dystrybucją gry "Selma and the Wisp" zajmie się największy polski wydawca gier - CDP.pl. Więcej zdjęć (5)

Dystrybucją gry "Selma and the Wisp" zajmie się największy polski wydawca gier - CDP.pl.

fot. materiały prasowe

Dystrybucją gry "Selma and the Wisp" zajmie się największy polski wydawca gier - CDP.pl.

fot. materiały prasowe


Pierwszymi pomysłami założycieli były aplikacje oparte na analizie obrazu, wirtualna pogłębiona rzeczywistość, algorytmy pozwalające przekształcić obraz w przydatną w najróżniejszych procesach informację. Zespół stworzył nowoczesny system Toucan Nest, dzięki któremu wykonuje oprawy ekspozycji muzealnych, targowych oraz eventów. Gdańska spółka pracowała dla Muzeum II Wojny Światowej w Gdańsku, Muzeum Emigracji w Gdyni, Muzeum Solidarności w Gdańsku, Centrum Pieniądza NBP, wykonali instalacje w Pałacu Krasińskich w Warszawie, Domu Mikołaja Kopernika czy w niemieckim pawilonie na Wystawie Światowej Expo 2017. Firma zaczęła też tworzyć własne gry komputerowe. "Selma and the Wisp", czyli mroczną grę o małej dziewczynce podróżującej przez krainę ciemności w towarzystwie świetlika, można kupić na największej światowej platformie dla graczy.

Teraz produkt dla seniorów



Sukces "oka tukana" był dla zespołu firmy motywacją do podjęcia prac nad kolejnym projektem wykorzystującym sztuczną inteligencję, który ma pomóc osobom słabiej funkcjonującym na co dzień. Teraz pracują nad urządzeniem Toucan Assistant, które ma na celu wsparcie seniorów w aktywności społecznej i lepszym samodzielnym funkcjonowaniu.

- Cechami, które odróżniają nasz projekt od innych systemów opieki nad osobami starszymi, jest to, że kierujemy go także do osób aktywnych i w pełni sprawnych, którym po zakończeniu pracy zawodowej urządzenie ułatwi kontakt z bliskimi i przyjaciółmi oraz realizowanie swoich zainteresowań i dzielenie się nimi z innymi. Projekt w założeniu będzie interaktywny wielokierunkowo, tzn. będzie współdziałał nie tylko z głównym użytkownikiem, ale także z jego rodziną, najbliższymi i przyjaciółmi - wyjaśnia Radosław Zdunek.
Z usług Toucan Systems korzystają często muzea, które inwestują środki w unowocześnianie ekspozycji i instalowanie multimediów. Więcej zdjęć (5)

Z usług Toucan Systems korzystają często muzea, które inwestują środki w unowocześnianie ekspozycji i instalowanie multimediów.

fot. materiały prasowe

Z usług Toucan Systems korzystają często muzea, które inwestują środki w unowocześnianie ekspozycji i instalowanie multimediów.

fot. materiały prasowe


Projekt ma całe spektrum funkcji opierających się na czterech filarach: aktywizacja, społeczność, komunikacja oraz opieka. Ich wybór to efekt współpracy z seniorami i określeniem ważnych dla nich potrzeb. Urządzenie ułatwi efektywniejsze wykorzystanie czasu.

- System zarekomenduje wydarzenia sprofilowane zgodnie z zainteresowaniami seniora i dostępne w jego okolicy. Dane pozyska ze stron internetowych, portali społecznościowych itp. Pomoże wyszukać w okolicy osoby gotowe nawiązać znajomość. Kontakt z drugim człowiekiem i budowanie przyjaźni to jedna z ważniejszych potrzeb zgłaszanych przez seniorów konsultujących projekt - dodaje Radosław Zdunek.

Nie tylko opieka, ale też aktywizacja



Toucan Assistant usprawni też komunikację. Za jego pomocą będzie możliwe prowadzenie wideorozmów, rozmów głosowych, przesyłanie materiałów multimedialnych czy prostych wiadomości tekstowych. Komunikacja będzie możliwa zarówno pomiędzy użytkownikami systemu, jak i pomiędzy użytkownikiem a osobami bliskimi, które będą korzystały z odpowiedniej aplikacji mobilnej. Asystent będzie też przypominał o porze przyjęcia leków, czasie posiłku i diecie, co jest szczególnie ważne przy kłopotach z pamięcią. Toucan Asistant pozwoli kontrolować aktywność i w przypadku jej braku powiadomi wskazaną osobę, np. członka rodziny. Ostrzeże przed gazem oraz innymi tego typu niebezpieczeństwami.

- Toucan Assistant przyjmie postać stacji bazowej, która będzie składać się z ekranu oraz głośnika. Do obsługi urządzenia opracowany zostanie dźwiękowy interfejs użytkownika wzbogacony o proste elementy graficzne widoczne na ekranie. Rozwiązanie zostanie oparte o sztuczną inteligencję, której rolą będą analiza języka naturalnego, rozpoznawanie mowy, synteza mowy i co będzie niezwykle istotne, rozbudowany system rekomendacji - wyjaśnia Radosław Zdunek.

Projekt uzyskał dofinansowanie NCBiR, a zakończenie pracy i w pełni funkcjonalny prototyp spodziewane są w roku 2022.

Opinie wybrane


wszystkie opinie (32)

alert Portal trojmiasto.pl nie ponosi odpowiedzialności za treść opinii.