Современное серийное производство трудно представить без роботизированных и автоматизированных систем. Например, роботы-погрузчики берут на себя транспортировку материалов внутри склада и производства. Благодаря этому снижается нагрузка на персонал и сокращается простой оборудования. Роботы требует минимального обслуживания и быстро адаптируются к изменениям в рабочем пространстве.
Для эффективной работы автоматизированных погрузчиков наша компания предлагает готовое решение: камеры с интерфейсом MIPI в связке с нейросетевым вычислителем. Система разработана специально для роботов-погрузчиков, а также для создания интеллектуальных цифровых оптических систем с возможностью AI-обработки видеоданных «на борту».
Видеопоток по MIPI (обычно MIPI CSI-2 для камер) дает ряд существенных преимуществ перед USB, GigE и другими интерфейсами, особенно при создании программного обеспечения для встроенных (встраиваемых) систем.
Подключение до 4-х MIPI CSI-2 легко обеспечивает передачу сырого потока кадров высокого разрешения, в том числе изображений разрешением 4K и даже 8K при высокой частоте кадров, так как поддерживает несколько дифференциальных линий с высокой скоростью передачи данных. Это позволяет подавать на ИИ-чип или процессор полный RAW-поток без сжатия, что важно для точной обработки и детального ИИ-анализа.
Вычисления «на борту»
Микрокомпьютер с производительностью в 6 TOPS (Tera Operations Per Second) – это «золотая середина» большинства задач компьютерного зрения и аналитики данных в реальном времени.
Например:
-
Обнаружение и классификация объектов в реальном времени;
-
Обработка нескольких потоков (например, 2 – 4 камеры) с включением ИИ для анализа кадра;
-
Обход препятствий (обработка данных с сенсоров и камер);
-
Следование за объектом.
IMU-блок интегрирован прямо в вычислитель для расширения функциональности движущихся «умных» систем без внешних датчиков.
Акселерометр определяет наклон платы (угол относительно земли), вибрации, удары и факт движения/покоя.
Гироскоп отслеживает повороты, вращения и микродвижения.
Магнитометр работает как «цифровой компас», показывая азимут (направление «на север») относительно платы.
Программная часть «из коробки»
Операционная система Linux для разработчика-программиста – это открытый исходный код, стабильность и мощные инструменты разработки, которые позволяют адаптировать систему под конкретные требования проекта. ОС Linux легкая и модульная, идеальна для создания программного обеспечения для встроенных (встраиваемых) систем, интегрированных в устройства с ограниченными ресурсами.
Нейросетевой вычислитель спроектирован специально для линейки MIPI-камер. В системе уже установлены драйверы MIPI CSI-2 для быстрого и легкого взаимодействия микрокомпьютера. Подключение модулей других производителей по MIPI CSI-2 потенциально возможно, но потребует разработки драйвера и переходной платы.
Обращаем внимание, что пользователи самостоятельно загружают требуемое программное обеспечение в память микрокомпьютера!
Примеры задач, которые может решить готовая сборка
Обход препятствий на высокой скорости: обработка видеопотока с частотой кадров без сжатия позволяет нейросети мгновенно детектировать препятствия, людей и других роботов-погрузчиков на пути следования.
Резервный инерциальный модуль: встроенный в плату IMU-блок (акселерометр, гироскоп, магнетометр) оценивает положение робота-погрузчика в пространстве.
Автономное следование за объектом: функция трекинга позволяет роботу автоматически сопровождать движущийся автомобиль, плавсредство или человека без участия оператора.
Таким образом, роботы-погрузчики с нашим готовым решением продемонстрируют еще большую эффективность без постоянного участия и контроля человека.
Для получения подробной информации обращайтесь по электронному адресу info@npk-photonica.ru или звоните по номеру +7 (812) 209-20-20.
