1.3Kпросмотров
26 декабря 2023 г.
Score: 1.4K
🤖 Как приложение Be My Eyes помогает незрячим и слабовидящим видеть Приложение создано для оказания визуальной помощи слабовидящим и незрячим людям. Через онлайн видео-звонок волонтеры помогают незрячим в разных вещах, от определения цветов до проверки включенного света или приготовления ужина. Как работает приложение:
Когда слабовидящий или незрячий пользователь запрашивает помощь, приложение отправляет уведомления нескольким волонтерам. Соединение волонтёров и незрячих пользователей происходит по принципу сходства языка и часового пояса. То есть, волонтёру из РФ не придёт запрос от пользователя из Китая. Первый ответивший на запрос доброволец соединяется с незрячим пользователем и видит изображение с его задней камеры в режиме реального времени. Взаимодействие происходит за счёт аудиосвязи, писать ничего не нужно. Поддерживается 180+ языков, а в базе приложения более 1 миллиона волонтеров. Когда и как часто можно звонить:
- Звонить можно в любое время дня и ночи.
- Нет ограничений по длительности или количеству звонков.
- На звонок отвечают в течение 30 секунд. С чем чаще всего просят помочь незрячие пользователи:
- Найти потерянный предмет
- Описать фотографию, картину или другое произведение искусства
- Определить цвет
- Решить проблему с компьютером
- Помочь с покупками
- Рассказать, что находится вокруг
- Определить, есть ли на остановке нужный транспорт. Как работают волонтёры:
- Волонтёры получают уведомления на телефон.
- Видеосвязь устанавливается односторонняя — волонтёрам нет нужды беспокоиться, что на заднем плане есть что-то лишнее.
- Так как волонтёров много, не все взаимодействуют с пользователями каждый день, иногда раз в неделю или даже раз в месяц. - Звонки поступают волонтёрам, только когда в их часовых поясах день, с 8 утра до 9 вечера.
- Не обязательно держать приложение открытым, чтобы принять звонок. Для этого достаточно быть просто залогиненным. Какие ещё есть возможности:
Недавно в приложении появился виртуальный волонтёр, ИИ-ассистент на базе нейросети GPT-4. Есть вероятность, что добавить ассистента помогли сами разработчики из OpenAI. Принцип взаимодействия похожий: нужно отправить фото объекта в чат, и ассистент его опишет. Также он может отвечать на дополнительные вопросы, например, я однажды отправила фото своего любимого певца, а потом спросила, какие у него глаза. В ответ, правда, получила, что фото нечёткое, и глаз не видно :) Что умеет ИИ-ассистент:
- Детально и весьма точно описывать объекты на фото — вот тут есть пример, как он описал мою кошку (фото кошки прилагается).
- Считывать текст с изображения — даже капчу с монитора компьютера Фотографии можно делать из приложения, а можно добавлять с устройства через функцию “Поделиться”. Приложение бесплатное, есть на IOS и на Андроид.
- Переводить на разные языки — пока не пробовала. Фотографии можно делать из приложения, а можно добавлять с устройства через функцию “Поделиться”. Приложение бесплатное, есть на IOS и на Андроид. #лена #техно