Apple представила навигационную систему SceneScout с GPT-4o для слабовидящих
Компания Apple совместно с Колумбийским университетом разработала инновационный проект SceneScout, призванный помочь незрячим и слабовидящим людям в навигации. Система использует Apple Maps и GPT-4o для преобразования визуальной информации в детальные голосовые описания окружающего пространства.
Как это работает?
SceneScout предлагает два режима:
- Route Preview — предварительный обзор маршрута с описанием препятствий, перекрестков и ориентиров.
- Virtual Exploration — навигация по запросу (например, «тихий район с парками»), где ИИ ведет пользователя к подходящему месту.
Технология имитирует поле зрения пешехода, анализирует данные карт и генерирует текстовые описания разной длины — от кратких до подробных.
Первые испытания
В тестах участвовали 10 человек с нарушениями зрения. Участники высоко оценили сервис, особенно режим Virtual Exploration, но отметили проблемы:
- Неточности в маркировке дорожных знаков.
- Устаревшие данные о временных изменениях (стройки, парковки).
Что дальше?
Пока проект остается исследовательским, но его успешные испытания повышают шансы на интеграцию в будущие версии iOS. Это может значительно улучшить качество жизни слабовидящих пользователей.