Android’s screen reader can now answer questions about images
Сегодня, в Global Accessibility Awareness Day (GAAD), многие технологические компании анонсируют новые функции для своих экосистем, направленные на улучшение доступности. Apple начала с анонса новых функций уже во вторник, а теперь к инициативе присоединилась и Google. Компания представила обновления для своего встроенного screen reader TalkBack, который теперь стал еще полезнее благодаря интеграции с одной из моделей Gemini от Google.
Теперь TalkBack может отвечать на вопросы о изображениях, отображаемых на вашем телефоне, даже если они не имеют альтернативного текста. Это значит, что когда друг отправит вам фото своей новой гитары, вы сможете получить описание и задать дополнительные вопросы о марке, цвете или других элементах на изображении. Такая возможность стала реальностью благодаря многомодальным способностям, заложенным в модель Gemini. Функция вопросов и ответов работает по всему экрану, что позволяет, например, задавать вопросы о цвете одежды при онлайн-шопинге и узнавать, есть ли на нее скидка.
Кроме того, Google запускает обновленную версию своей функции Expressive Captions. Впервые анонсированная в конце прошлого года, эта функция генерирует субтитры, которые пытаются передать эмоции сказанного. Например, если во время видеочата друг стонет после вашей шутки, телефон не только подпишет его слова, но и добавит «[groaning]» в транскрипцию. В новой версии Expressive Captions субтитры будут отражать, когда кто-то растягивает звуки слов. Это означает, что во время просмотра live-трансляции футбольного матча, когда комментатор кричит «гооооол!», его восторг будет правильно транскрибирован. Также добавлено больше меток для звуков, таких как кашель.
Обновленная версия Expressive Captions будет доступна англоязычным пользователям в США, Великобритании, Канаде и Австралии, использующим Android 15 и выше.
Эти нововведения от Google делают Android еще более доступным и удобным для пользователей с ограниченными возможностями, обеспечивая им более полное и насыщенное взаимодействие с контентом на своих устройствах.
Подпишитесь на новости в телеграм: https://t.me/itnewsros