Автономный робот манипулятор с колесами всенаправленного движения для изучения операционных систем реального времени, экраном, лидаром и камерой глубины, поддержкой картографирования и навигации SLAM “Яков” ПРО

Автономный робот-манипулятор “Яков” ПРО – это профессиональная роботизированная платформа, разработанная для изучения операционных систем реального времени и разработки на базе NVIDIA Jetson Nano B01.

Особенностью данной модели является наличие 4 всенаправленных механических колес, что позволяет роботу двигаться на 360° без необходимости поворота. Это обеспечивает высокую маневренность и удобство использования.

Оснащенный 5-осевым манипулятором с камерой технического зрения, робот-манипулятор “Яков” ПРО может осуществлять захват, сортировку и перемещение объектов. Это позволяет использовать его в различных областях, таких как робототехника, автоматизация и обучение.

6-канальный микрофонный массив дальнего действия и динамики поддерживают позиционирование источника звука и управление распознаванием голоса. Это позволяет использовать голосовую навигацию и интеллектуально взаимодействовать с людьми.

Робот-манипулятор “Яков” ПРО оснащен камерой глубины, которая позволяет эффективно воспринимать изменения окружающей среды. Это позволяет интеллектуально взаимодействовать с людьми и эффективно использовать робота в различных задачах.

В целом, автономный робот-манипулятор “Яков” ПРО – это мощная и многофункциональная платформа, которая станет незаменимым помощником в обучении, разработке и исследованиях в области робототехники, автоматизации и других областях.

Возможности набора:

• NVIDIA Jetson Nano может запускать основные платформы глубокого обучения, такие как TensorFlow, PyTorch, Caffe/Caffe2, Keras, MXNet.
• JetAuto на базе Jetson Nano может реализовывать распознавание изображений, обнаружение и позиционирование объектов, оценку позы, семантическую сегментацию, интеллектуальный анализ.
• JetAuto оснащен высокопроизводительным лидаром, который поддерживает картографирование с использованием различных алгоритмов, включая Gmapping, Hector, Karto и Cartographer.
• Возможность реализовать планирование пути, навигацию по фиксированной точке, а также обход препятствий во время навигации.
• Возможность отслеживать препятствие в режиме реального времени во время навигации. Таким образом, он может перепланировать маршрут, чтобы избежать препятствия и продолжить движение.
• Используя алгоритм RRT, JetAuto Pro может завершить картографирование исследования, сохранить карту и самостоятельно вернуться к исходной точке, поэтому нет необходимости в ручном управлении.
• Камера глубины поддерживает 3D-картографирование двумя способами: чистое RTAB-видение и объединение видения, а также лидар, который позволяет автономному мобильному роботу перемещаться и избегать препятствий, как на 3D-карте, так и в реальных условиях.
• ORB-SLAM — это платформа SLAM с открытым исходным кодом для монокулярных, бинокулярных камер и камер RGB-D, которая способна вычислять траекторию камеры в реальном времени и реконструировать трехмерное окружение. А в режиме RGB-D можно получить реальный размер объекта через соответствующий API может получить карту глубины, цветное изображение и облако точек камеры.
• На основе платформы MediaPipe может выполнять распознавание человеческого тела, кончиков пальцев, лиц, 3D-обнаружение и многое другое.
• Используйте сетевой алгоритм YOLO и библиотеку моделей глубокого обучения для распознавания объектов.
• Опираясь на алгоритм фильтрации KCF, робот может отслеживать выбранную цель, способен распознавать и отслеживать назначенный цвет, а также одновременно распознавать несколько QR кодов и их координаты.
• Возможность работать с кинематической имитационной моделью URDF.
• 6-микрофонная матрица отлично справляется с локализацией источника звука в дальней зоне, распознаванием голоса и голосовым взаимодействием. По сравнению с обычным микрофонным модулем он может реализовывать более продвинутые функции.
• Возможность связи между несколькими машинами может обеспечить навигацию для нескольких транспортных средств, планирование пути и интеллектуальное предотвращение препятствий.

Уровни обучения:

• Исследовательский уровень: Знакомство со сложной кинематикой, основы тригонометрии, углубленное изучение текстовых языков программирования, изучение физических основ работы датчиков.
• Продвинутый уровень: Изучить алгоритмы поиска пути: A*, Dijkstra, RRT, PRM, Развитие навыков планирования движения: локальное и глобальное планирование, планирование траекторий. Распознавания графических маркеров, распознавание массивов линий и элементов дорожных знаков и разметки, картография, распознавание направления источника звука. Способы использования роботов и глубокого обучения для автоматизации различных процессов. Визуализация облака точек