В Германии автомобиль оснастили ИИ, который распознает звуки с улицы
Автомобили начинают «слышать» мир вокруг себя, расширяя возможности камер и радаров. Проект Hearing Car, возглавляемый Морицом Брандесом из Fraunhofer IDMT, разрабатывает акустические системы, позволяющие транспортным средствам реагировать на звуки так же, как это делают люди.
«Очень важно, чтобы автомобиль умел слышать окружающие звуки и правильно их распознавать. Многие события на дороге можно предугадать по звукам — например, сирена приближающейся машины скорой помощи предупреждает всех о ее появлении», — объясняет Брандес.
Акустические датчики фиксируют события, которые камеры не видят — за углами, на перекрестках, в плотном городском трафике. Они способны распознавать разные типы сигналов: сирены скорой помощи и пожарных, гудки других автомобилей, велосипедные звонки, голосовые предупреждения пешеходов, скрипы тормозов и шум движения транспорта на соседних полосах. Датчики разработаны для работы в экстремальных условиях: дождь, ветер, снег, высокие и низкие температуры.
Демонстрационный автомобиль оснащен многоканальными микрофонами и системой искусственного интеллекта, которая классифицирует дорожные звуки в режиме реального времени, оценивает их направление и интенсивность, а затем сообщает водителю о потенциальной опасности. Важные сигналы могут передаваться напрямую в салон через подголовник, так что водитель слышит сирену или предупреждение раньше, чем сможет их заметить глазом.
Тестирование автомобиля проходило в разнообразных климатических условиях — от Португалии до Полярного круга, чтобы проверить систему в реальных сценариях, включая густой туман, снегопады и сильный дождь. Такой подход демонстрирует, что акустические датчики могут дополнить или заменить визуальные системы в сложных условиях, где камеры и радары ограничены.
Технология также улучшает взаимодействие с пассажирами. Голосовые команды, например «Откройте багажник» или «Включите навигацию», распознаются только от авторизованных пользователей, что предотвращает случайное срабатывание.
Внутри салона интегрированы системы мониторинга состояния водителя: радиолокационные датчики фиксируют частоту сердечных сокращений и дыхание без контакта, а мобильные ЭЭГ-повязки отслеживают активность мозга, выявляя усталость или потерю концентрации. Голосовой анализ определяет уровень стресса или волнения, позволяя системе адаптировать подсказки и предупреждения в реальном времени.
Для пассажиров предусмотрена система YourSound, персонализирующая аудио и создающая комфортную среду прослушивания. Виртуальный звуковой помощник автоматически подбирает музыку, подкасты и аудиокниги под индивидуальные предпочтения, учитывая количество пассажиров, их положение в салоне и уровень внешнего шума.
Исследование поддерживают Министерство науки и культуры Нижней Саксонии, Фонд Volkswagen и Федеральное министерство исследований, технологий и космоса Германии. Прототип будет представлен с 9 по 12 сентября на выставке IAA MOBILITY 2025 в Мюнхене.
