ИИ научился считывать эмоции и делать точные описания.
Google представила обновления для экосистемы Android, направленные на улучшение функциональности и доступности устройств. Среди ключевых нововведений — Expressive Captions, Image Q&A, а также интеграция с популярными приложениями и улучшения для пользователей Pixel.
Expressive Captions — функция, которая автоматически создаёт субтитры, передавая не только текст, но и эмоциональные нюансы сказанного. Например, если во время видеозвонка собеседник издаёт недовольный звук после неудачной шутки, субтитры отразят не только слова, но и добавят описание типа «[стонет]». Технология также распознаёт другие особенности речи, такие как шёпот или вздохи. Эта функция работает в приложениях Android, включая социальные сети и стриминговые сервисы. Согласно информации Google, она доступна на устройствах Pixel 6 и более новых моделях, а также на некоторых других совместимых устройствах Android.
Функция Image Q&A , интегрированная в приложение Lookout, получила обновление с использованием модели Gemini 1.5 Pro, что позволяет предоставлять более точные и подробные описания изображений. Инструмент разработан для помощи людям с нарушениями зрения, однако он также может использоваться для создания описаний изображений в естественной форме.
Искусственный интеллект Gemini получил новые расширения для взаимодействия с популярными приложениями Android. Например, плагин для Spotify позволяет воспроизводить любимую музыку и искать плейлисты под настроение. Google обещает дальнейшую интеграцию с Google Maps и устройствами умного дома.
Gemini теперь может запоминать пользовательские предпочтения для предоставления более персонализированных ответов. Например, если пользователь укажет, что является вегетарианцем, при следующем запросе рецепта Gemini учтёт эту информацию. Компания подчёркивает, что пользователи могут легко просматривать, изменять и удалять данные, сохранённые системой.
В Google Drive добавлена функция автоматической обработки загружаемых документов. При загрузке изображения система оптимизирует контраст, баланс белого и устраняет тени или размытость.
Функция Quick Share получила улучшение, позволяющее передавать файлы с помощью QR-кодов. Теперь для отправки фотографий, видео или документов не нужно добавлять получателя в контакты или менять настройки.
Устройства Pixel получают все перечисленные функции, а также обновления для приложения Pixel Screenshots. Теперь снимки экрана можно сохранять в Circle to Search, что упрощает поиск товаров, например, в праздничный сезон. Кроме того, программа автоматически сортирует снимки и предлагает рекомендации, основанные на сохранённой информации, такие как напоминания или маршруты.
Как и в случае с большинством обновлений Android, внедрение новых функций будет происходить постепенно. Некоторым пользователям может потребоваться подождать, прежде чем они появятся на устройствах.