Автономные транспортные средства, «слепящие» в густом тумане, промышленные роботы, застрявшие в темных заводских углах, или интеллектуальные медицинские устройства, выдающие ложные срабатывания из-за изменений освещения — вот критические сбои, с которыми сталкиваются системы Edge AI , полагающиеся исключительно на традиционные оптические датчики (камеры и LiDAR). Для достижения истинной автономности 5-го уровня и всестороннего интеллекта во всех сценариях машинам необходимы надежные возможности восприятия, не ограниченные окружающей средой .
Это главное и незаменимое преимущество миллиметрового (ммВ) радиолокационного датчика .
Как подчеркнул вице-президент NVIDIA по робототехнике и периферийному ИИ Дипу Талла: «Мы не создаем роботов, но мы обеспечиваем всю отрасль нашей инфраструктурой и программным обеспечением». Такие платформы, как комплект разработчика NVIDIA Jetson AGX Thor, специально разработаны для эффективной обработки данных датчиков нового поколения с высокой степенью надежности, которые предоставляет технология миллиметровых волн, что делает возможным автономное управление в реальном времени.
В этой статье мы подробно рассмотрим, как радар миллиметрового диапазона , используя свои уникальные физические свойства, обеспечивает всепогодную, высокоточную и конфиденциальную основу для восприятия в таких важных секторах, как автономные машины, интеллектуальный транспорт и здравоохранение с использованием искусственного интеллекта . Мы проанализируем конкретную техническую ценность и огромный потенциал, раскрываемый благодаря глубокой интеграции с мощными процессорами Edge AI .
Физический принцип, преодолевающий оптические ограничения.
Чтобы в полной мере оценить преимущества радаров миллиметрового диапазона , необходимо начать с определения рабочего частотного диапазона.
Радарные датчики миллиметрового диапазона работают в электромагнитном спектре от 30 ГГц до 300 ГГц , с соответствующими длинами волн всего от 1 до 10 миллиметров . По сравнению с видимым или ближним инфракрасным светом, используемым камерами и лидарами, большая длина волны, характерная для миллиметрового диапазона, обеспечивает ему незаменимую проникающую способность:
Проникновение в окружающую среду: Миллиметровые волны способны проходить сквозь капли дождя, снежинки, туман, дымку и пыль с минимальным затуханием сигнала. Это основная причина, по которой оптические датчики выходят из строя в неблагоприятных погодных условиях. Это физическое свойство обеспечивает непрерывный и надежный поток данных практически в любых условиях на открытом воздухе.
Проникновение в материалы: Технология MmWave способна проходить сквозь непроводящие материалы, такие как пластик, гипсокартон и одежда. Это позволяет осуществлять бесконтактный мониторинг жизненно важных показателей или скрытое развертывание, предоставляя уникальные преимущества в медицинских, охранных и интеллектуальных системах управления зданиями.
Технический анализ: Переход от 3D к 4D облакам точек
Современные радары миллиметрового диапазона в основном используют технологию частотно-модулированной непрерывной волны (FMCW) . Анализируя изменение частоты (доплеровский сдвиг) и временную задержку отраженного сигнала, датчик точно определяет не только дальность, азимут и угол места цели (трехмерная пространственная информация) , но и ее радиальную скорость , генерируя четырехмерное облако точек , включающее информацию о скорости.
Эти 4D-данные имеют огромную ценность для систем Edge AI : модели ИИ могут напрямую использовать информацию о скорости для быстрого различения статических объектов (помех) и движущихся целей (например, пешехода), что значительно повышает точность алгоритмов прогнозирования и отслеживания . Кроме того, используя фильтрацию по эффекту Доплера, системы могут эффективно подавлять шум и «фантомные цели», вызванные многолучевыми отражениями, очищая данные восприятия.
Три основных принципа MmWave Radar для периферийного ИИ
Радар миллиметрового диапазона необходим для объединения данных с различных датчиков , выступая в качестве важнейшего дополнения для решения трех основных проблем восприятия в системах искусственного интеллекта:
1. Обеспечение надежного восприятия в любых погодных и экологических условиях.
В системах автономного вождения миллиметровый радар, пожалуй, является единственным датчиком, сохраняющим высокую производительность в условиях сильного дождя, густого тумана или яркого заднего света . В промышленных условиях его способность проникать сквозь дым, пыль и металлические сетки обеспечивает безопасную и непрерывную работу промышленных роботов и автономных мобильных роботов (АМР) в суровых заводских условиях, значительно повышая время безотказной работы и надежность системы .
2. Уникальная ненавязчивая защита конфиденциальности.
Важно отметить, что датчики миллиметрового диапазона выдают абстрактные данные в виде 4D-облака точек , а не визуально идентифицируемые изображения. Эта функция позволяет осуществлять непрерывный мониторинг присутствия людей, их поведения (падений) и жизненно важных показателей в таких чувствительных средах, как дома престарелых или больницы , при этом полностью соблюдая строгие правила защиты конфиденциальности (например, GDPR).
3. Гибкое развертывание благодаря низкой стоимости и компактным размерам.
Благодаря передовой технологии интеграции CMOS-чипов на одном кристалле , высокопроизводительные радиолокационные модули миллиметрового диапазона компактны и чрезвычайно энергоэффективны (обычно потребляют около 1 Вт). Малый размер и низкое энергопотребление облегчают развертывание крупномасштабных, маломощных и распределенных сетей датчиков Edge AI , что позволяет легко интегрировать их в кузова автомобилей или инфраструктуру умного города.
Преодоление ограничений: синергия с NVIDIA Jetson
Главным ограничением стандартных миллиметровых радаров традиционно является их относительно низкое угловое разрешение по сравнению с высококлассными лидарами, что затрудняет точное различение двух объектов, расположенных очень близко друг к другу.
Ключ к решению этой задачи кроется в мощных вычислительных возможностях платформ Edge AI, таких как серия NVIDIA Jetson:
Снижение проблем, связанных с низким угловым разрешением: за счет развертывания сложных моделей глубокого обучения (например, PointNet++) на периферии системы, она может выполнять сверхразрешающую реконструкцию и семантическую сегментацию разреженных данных 4D-облака точек. Это позволяет осуществлять точную классификацию объектов , различая объединенные кластеры точек.
Устранение многолучевых помех: система использует возможности параллельной обработки графического процессора/DLA Jetson для выполнения сложных алгоритмов реального времени, таких как фильтр Калмана и передовые методы кластеризации. Эти методы надежно отслеживают несколько целей и подавляют «фантомные цели» в условиях загроможденной среды.
Высокоскоростное слияние данных: платформа NVIDIA Jetson AGX Thor обеспечивает необходимую высокоскоростную передачу данных и унифицированную архитектуру памяти для эффективного объединения точных данных о скорости, получаемых с помощью mmWave, с семантической насыщенностью данных с камер и пространственной точностью LiDAR. Это слияние обеспечивает высокоточное и интеллектуальное принятие решений с низкой задержкой .
Эта синергия обеспечивает быстрое и точное преобразование радиолокационных данных миллиметрового диапазона в машиночитаемый высокосемантический интеллект на периферии сети, что является необходимым условием для развития автономного управления.
Подробное описание применения миллиметровых радаров в ключевых отраслях промышленности.
1. Интеллектуальный транспорт и транспортные средства нового поколения
В системах ADAS (Advanced Driver Assistance Systems) радар миллиметрового диапазона 77/79 ГГц является критически важным датчиком для функций уровней L2+ и L4. Он обеспечивает обнаружение на больших расстояниях (до 200 метров) и точную оценку скорости для таких систем, как адаптивный круиз-контроль (ACC), автоматическое экстренное торможение (AEB) и мониторинг слепых зон (BSM) , гарантируя безопасность в сложных погодных условиях.
2. Медицинские услуги с использованием ИИ и бесконтактный мониторинг
Радар миллиметрового диапазона 60 ГГц меняет подходы к мониторингу состояния здоровья. Он позволяет осуществлять непрерывный бесконтактный мониторинг частоты сердечных сокращений и дыхания пациента даже через матрасы или одеяла. Кроме того, он точно определяет рискованное поведение, такое как падения или попытки покинуть кровать . Этот неинвазивный подход, обеспечивающий конфиденциальность, является революционным для ухода за пожилыми людьми, мониторинга новорожденных и современных исследований сна .
3. Промышленная и логистическая робототехника (AMR/коботы)
На заводах, складах и в логистических центрах миллиметровый радар используется для предотвращения столкновений с препятствиями и точной навигации автоматизированных мобильных роботов. Он особенно эффективен для поддержания стабильности и надежности в условиях высокой плотности металлических стеллажей или в зонах со значительным количеством пыли и дыма , обеспечивая эффективное взаимодействие человека и робота .
Заключение: миллиметровый радар — мост восприятия к общему искусственному интеллекту.
Радарные датчики миллиметрового диапазона играют жизненно важную роль, обеспечивая всепогодную, высоконадежную и конфиденциальную работу систем восприятия, необходимую для развития периферийного ИИ и робототехники . Они уникальным образом компенсируют недостатки оптических датчиков и, благодаря глубокой интеграции с высокопроизводительными платформами периферийных вычислений, такими как NVIDIA Jetson , преобразуют данные 4D-облака точек в высокоточные интеллектуальные решения в режиме реального времени .
По мере развития и масштабирования технологии 4D-радарного изображения , миллиметровый радар станет не просто дополнительным датчиком, а фундаментальным строительным блоком для создания будущих универсальных автономных систем и высоконадежной интеллектуальной инфраструктуры .
Часто задаваемые вопросы (FAQ)
Что такое 4D-радар?
4D-радиолокатор — это передовое поколение миллиметровых волновых радаров, которое одновременно выдает данные о дальности, азимуте, месте (в трехмерном пространстве) и радиальной скорости цели, создавая облако точек высокой плотности.
Как решается проблема низкого углового разрешения в радарах миллиметрового диапазона?
Эта проблема решается с помощью антенных решеток MIMO (Multiple-Input Multiple-Output) в аппаратном обеспечении и путем развертывания алгоритмов сверхвысокого разрешения на основе глубокого обучения на мощных периферийных платформах, таких как NVIDIA Jetson .
Какова типичная задержка миллиметрового радара?
Благодаря твердотельной конструкции и интеграции обработки DSP/MCU на кристалле, радар миллиметрового диапазона обеспечивает чрезвычайно низкую задержку обнаружения, обычно в миллисекундном диапазоне, что имеет решающее значение для принятия решений в реальном времени в автономных системах.
В чём заключаются основные преимущества миллиметрового радара по сравнению с лидаром?
Радары миллиметрового диапазона обладают значительными преимуществами в плане проникновения в неблагоприятные погодные условия, точного измерения скорости цели, сохранения конфиденциальности и экономической эффективности для крупномасштабного развертывания .