Приложение Aipoly рассказывает слабовидящим людям об окружающем мире

Aipoly может быть установлено на iOS, готовится версия для Android, а также устройство в форме очков. Фото: промо-видео приложения YouTube.
Aipoly может быть установлено на iOS, готовится версия для Android, а также устройство в форме очков. Фото: промо-видео приложения YouTube.

При­ло­же­ние Aipoly помо­га­ет незря­чим и сла­бо­ви­дя­щим людям ори­ен­ти­ро­вать­ся при помо­щи смарт­фо­на. Aipoly исполь­зу­ет дан­ные с фото­ка­ме­ры смарт­фо­на, кото­рая пере­да­ет инфор­ма­цию о пред­ме­тах, попав­ших в объ­ек­тив. Изоб­ра­же­ние обра­ба­ты­ва­ет­ся, после чего при­ло­же­ние озву­чи­ва­ет назва­ние пред­ме­та. Про­ис­хо­дит это все в режи­ме реаль­но­го вре­ме­ни.

Еще по теме: Be My Eyes – стань гла­за­ми для незря­чих людей

Aipoly под­дер­жи­ва­ет 7 язы­ков, может опре­де­лять цвет пред­ме­та. При­ло­же­ние спо­соб­но раз­ли­чать раз­ные пред­ме­ты на одной поверх­но­сти, к при­ме­ру, если на сто­ле есть и круж­ка, и тарел­ка, и лож­ка, а так­же спо­со­бы вза­и­мо­дей­ствия, если речь идет о чело­ве­ке, кото­рый едет на вело­си­пе­де.

Aipoly может определять цвет. Фото: промо-видео приложения YouTube.
Aipoly может опре­де­лять цвет. Фото: про­мо-видео при­ло­же­ния YouTube.

При­ло­же­ние исполь­зу­ет машин­ное обу­че­ние, в биб­лио­те­ке Aipoly более 1000 раз­лич­ных объ­ек­тов, при этом систе­ма уже про­шла обу­че­ние несколь­ки­ми сот­ня­ми тысяч изоб­ра­же­ний. Aipoly про­дол­жа­ет учить­ся и попол­нять свой ката­лог извест­ных ей при­ло­же­ний и ситу­а­ций. Поль­зо­ва­те­ли так­же могут помо­гать учить­ся при­ло­же­нию, вво­дя инфор­ма­цию об объ­ек­тах.

Еще по теме: Рас­по­зна­ю­щее текст при­ло­же­ние от ABBYY полу­чи­ло функ­ции для сла­бо­ви­дя­щих людей

Одна из целей, кото­рую реша­ли раз­ра­бот­чи­ки в ходе созда­ния при­ло­же­ния, – натре­ни­ро­вать систе­му на осо­бен­но важ­ные для ауди­то­рии Aipoly груп­пы объ­ек­тов, напри­мер, дорож­ные зна­ки или спе­ци­фи­че­ские пред­ме­ты из оби­хо­да сла­бо­ви­дя­щих людей (кла­ви­а­ту­ра со шриф­том Брай­ля, белая трость).

Aipoly может быть уста­нов­ле­но на iOS, гото­вит­ся вер­сия для Android, а так­же устрой­ство в фор­ме очков. Фото: про­мо-видео при­ло­же­ния YouTube.

В 2017 году при­ло­же­ние полу­чи­ло награ­ду best innovation на тех­но­ло­ги­че­ской выстав­ке CES. Созда­те­ли при­ло­же­ния сей­час тести­ру­ют очки, кото­рые мог­ли бы так­же под­дер­жи­вать тех­но­ло­гию рас­по­зна­ва­ния пред­ме­тов.

Aipoly