Обзор: Развитие многосенсорной интеграции
Многосенсорное слияние стало стандартным методом получения надежной информации об окружающей среде в современных системах автономного вождения, робототехники и интеллектуального восприятия. Хотя камеры и лидар (Light Detection and Ranging) отлично подходят для получения пространственных данных высокого разрешения и семантического распознавания, в некоторых ситуациях их возможности все еще ограничены. Благодаря своим уникальным физическим характеристикам (длина волны 1–10 мм, частота 30–300 ГГц), миллиметровый радар (mmWave Radar) обеспечивает эффективную компенсацию, гарантируя стабильное обнаружение даже в условиях дефицита других датчиков.
Системы восприятия могут повысить точность, надежность и безопасность за счет интеграции данных из различных источников. В последующих разделах описывается, как радар миллиметрового диапазона улучшает производительность системы, работая в тандеме с лидаром и камерами.
1. Повышение производительности лидара за счет использования миллиметрового радара.
1.1 Стабильные результаты в неблагоприятных погодных условиях
Лидар использует лазерные импульсы для создания трехмерных облаков точек высокого разрешения, что обеспечивает точное пространственное картирование. Однако лазерные лучи легко рассеиваются или поглощаются в дожде, тумане, снегу или пыли, что приводит к образованию разреженных или зашумленных облаков точек. С другой стороны, радиолокационные волны миллиметрового диапазона позволяют точно измерять расстояние и скорость в условиях плохой видимости, поскольку они проходят сквозь пыль, дождь и туман.
Например, радар миллиметрового диапазона может охватывать несколько сотен метров, гарантируя своевременное обнаружение автомобилей или пешеходов, в то время как лидар может обнаруживать близлежащие препятствия только в густом тумане.
1.2 Преимущества стоимости и внедрения
Высококачественные лидары (например, с разрешением 64 линии и выше) стоят дорого, часто десятки тысяч долларов, а их размеры ограничивают гибкость развертывания. Компактные, доступные и хорошо разработанные радары миллиметрового диапазона легко устанавливаются на решетках радиатора, боковых или задних панелях автомобиля, обеспечивая круговой обзор на 360°. Такая адаптивность делает доступными системы объединения данных с нескольких датчиков.
1.3 Быстрое динамическое распознавание объектов
Хотя лидар может идентифицировать как статические, так и динамические объекты, для отслеживания быстро движущихся целей в реальном времени обычно требуется объединение нескольких кадров, что увеличивает вычислительные затраты и задержку. Радар миллиметрового диапазона быстро прогнозирует траектории объектов, используя эффект Доплера для непосредственного измерения радиальной скорости (с точностью до 0,1 м/с) вместе с данными о расстоянии и угле. Это особенно важно на автомагистралях, помогая избегать препятствий или быстро приближающихся транспортных средств.
2. Преимущества использования миллиметрового радара в системах видеонаблюдения
2.1 Высокая адаптивность освещения
Несмотря на высокую чувствительность камер к освещению, они отлично справляются с классификацией объектов и семантическим распознаванием. Контрастное освещение, динамическое освещение (например, въезды и выезды из туннелей) и ночное время могут снижать качество изображения и приводить к пропуску или неточному обнаружению объектов. Радар миллиметрового диапазона может обеспечивать надежное обнаружение и отслеживание объектов круглосуточно и не зависит от освещения.
Например, радар может обнаруживать пешеходов ночью, сначала определяя местоположение цели, а затем направляя камеру для подтверждения её обнаружения, что повышает точность в условиях низкой освещённости.
2.2 Точное измерение расстояния и глубины
Стереокамеры увеличивают глубину резкости, но требуют дополнительного оборудования, в то время как монокулярные камеры полагаются на алгоритмы оценки глубины, которые имеют ограниченную точность. Радар миллиметрового диапазона обеспечивает точность на уровне сантиметров за счет прямого измерения угла и расстояния с использованием времени пролета (TOF). Точность карт глубины и моделирования окружающей среды повышается при объединении данных радара и камеры, особенно в сложных или дальних ситуациях.
2.3 Обнаружение мелких объектов и перекрытий
Когда объекты частично заслонены (например, автомобилями, листьями или пешеходами) или когда речь идет о небольших, удаленных целях (например, велосипедах), камеры могут работать со сбоями. В условиях плотной городской застройки радарные лучи могут уменьшить слепые зоны, обнаруживая мелкие объекты и проникая сквозь некоторые неметаллические материалы. Они также могут идентифицировать скрытые цели за препятствиями.
3. Преимущества миллиметрового радара для интеграции нескольких датчиков
Надежность в любых погодных условиях: стабильная работа в условиях пыли, снега, дождя и тумана.
Низкая стоимость и масштабируемость: обеспечивает полное покрытие за счет многоточечного развертывания.
Точно отслеживает динамические препятствия, измеряя скорость и расстояние в реальном времени.
В дополнение к другим датчикам: компенсирует зависимость камер от освещенности и чувствительность лидара к погодным условиям.
В действительности данные LiDAR, камер и радаров объединяются в единую модель восприятия с использованием методов слияния (таких как фильтр Калмана или методы глубокого обучения). LiDAR предоставляет пространственные данные высокого разрешения, камеры — семантическую информацию, а радар гарантирует избыточное и надежное обнаружение, что в совокупности повышает безопасность и упрощает принятие решений.
4. Перспективы на будущее: 4D миллиметровый радар
Роль миллиметровых радаров в многосенсорном слиянии данных еще больше усилится с появлением 4D-радара. 4D-радар создает более плотные облака точек и формы объектов, обеспечивая более высокое угловое разрешение и информацию о вертикальных размерах. Это позволяет поддерживать надежность в любых погодных условиях, приближая характеристики радара к характеристикам лидара.
Подведение итогов
Для компенсации ограничений лидара и камеры, связанных с погодными условиями, освещением, оценкой глубины и перекрытием объектов, миллиметровый радар является неотъемлемой частью многосенсорных систем слияния данных. Он необходим для современных автономных транспортных средств и интеллектуальной робототехники благодаря своей высокой точности, надежности и доступности. По мере развития радиолокационные технологии будут играть еще более важную дополнительную роль в системах слияния данных, обеспечивая надежное и стабильное восприятие.
Часто задаваемые вопросы
В1: Можно ли полностью заменить лидар миллиметровым радаром?
A1: Радар миллиметрового диапазона не заменяет лидар, а улучшает его характеристики. В то время как радар гарантирует надежное обнаружение в сложных условиях, лидар обеспечивает высокоточное трехмерное картографирование.
В2: Каким образом радар повышает эффективность камер в ночное время?
A2: Радар способен обнаруживать объекты ночью, направляя камеру на цели и повышая точность обнаружения в условиях низкой освещенности.
В3: Могут ли все виды транспортных средств использовать радары миллиметрового диапазона?
A3: Благодаря своим небольшим размерам и доступной цене, он подходит для легковых автомобилей, коммерческих автопарков и робототехники.
Вопрос 4: Каким образом в будущем будет использоваться радар миллиметрового диапазона для объединения данных с нескольких датчиков?
A4: Более плотные облака точек и более высокое разрешение, обеспечиваемые 4D-радаром, повысят точность объединения данных и предоставят автономным системам более полную информацию об окружающей среде.