¶ Настройка NANOPIX Нейромодуль
Ссылка на модуль расширения для исполнения нейросетей на борту NANOPIX
Ссылка на готовый комплект: дрон NANOPIX + ИИ модуль + пульт NANOPAD
Для быстрого старта с системой распознавания образов на борту NANOPIX рекомендуется настроить сетевое подключение нейромодуля и запустить скрипт детекции объектов.
¶ Световая индикация модуля
При подаче питания на дрон или подключении модуля к ПК по USB-C, обратите внимание на светодиод на плате:
- Горящий красный светодиод и разово моргнувший синий светодиод: происходит загрузка операционной системы Linux.
- Постоянное свечение красного светодиода и редкое мигание синего светодиода: система загружена и готова к приему команд.
- Горящий красный светодиод и частое мерцание синего светодиода: запущен скрипт ИИ, камера активно обрабатывает изображение.
¶ Подключение к ПК и работа с файлами
Скачать архив с установщиком MaixVision IDE(для Windows).
Версию MaixVision IDE можно скачать с официального сайта
Скачать архив с базовыми скриптами.
Существует два основных способа взаимодействия с модулем:
¶ 1. MaixVision (Рекомендуемый способ)
- Скачайте и установите MaixVision IDE.
- Подключите модуль к ПК кабелем USB-C.
(Важно: кабель должен поддерживать передачу данных (Data), а не только зарядку!) - В нижнем левом углу нажмите Connect и выберете свое устройство.
появление модуля возможно не сразу.
Если порт не отображается, установите драйверы USB-Serial
¶ 
¶ 2. SSH-подключение
Для доступа используйте любой терминал (PuTTY, VS Code).
Устройство должно определяться системой как сетевое.
Выполните команду:
ssh root@<ip_адрес_модуля>
Пароль "root"
¶ Настройка Wi-Fi соединения(2.4 или 5 GHz)
Настройка выполняется один раз или при смене Wi-Fi сети.
¶ 1.
Откройте MaixVision, подключитесь к модулю и загрузите скрипт wifi_connect.py на плату в папку root рядом с папкой models.
После запустите скрипт без аргументов. Он сам спросит SSID, пароль и предложит перезагрузку.
python3 wifi_config.py
¶ 2.
Быстрый режим (аргументы)
Передайте данные сети прямо в команде.
python3 wifi_config.py "Имя_Сети" "Пароль_Сети"
По завершении работы скрипта плату нужно будет перезагрузить вручную или можете воспользоваться флагом.
Для автоматической перезагрузки
Добавьте флаг -r, чтобы плата сразу ушла в перезагрузку и применила настройки.
python3 wifi_config.py "SSID" "PASSWORD" -r
После этого к модулю можно подключаться по Wi-Fi с устройства, находящегося в этой же локальной сети.
¶ Запуск ИИ-классификатора
Для передачи данных о распознанных объектах по протоколу UART в полетный контроллер NANOPIX необходимо запустить основной алгоритм.
- В MaixVision откройте файл
MAIX_CSV.py. - Нажмите кнопку Run.
- В окне терминала должен начаться вывод телеметрии:
[Core] FPS: 10.5 | Temp: 48.2C | Objs: 1 PERSON: x:160 y:112 w:50 h:120 c:0.92
Если данные PERSON начали выводиться — модуль готов к совместной работе с дроном.
¶ Взаимодействие с NANOPIX
Рассмотрим подробнее как устроено взаимодействие модуля и полетного контроллера дрона NANOPIX. Нейромодуль выступает в роли внешнего вычислителя, который распознает объекты или обрабатывает любую другую информацию с использованием ускорителя нейронных сетей. Общение нейромодуля с полетным контроллером квадрокоптера NANOPIX осуществляется по протоколу UART.
Из ИИ модуля выходит один коннектор с 4 проводами. Правильное подключение модуля к полетному контроллеру NANOPIX:
¶ Базовое взаимодействие модуля и дрона
- Захват и обработка: Модуль получает видеопоток с камеры и обрабатывает его с помощью встроенного нейропроцессора.
- Анализ: Скрипт
MAIX_CSV.pyнаходит объект и вычисляет его центр и размеры в пикселях. - Передача данных: Модуль отправляет CSV-строку (класс, точность, x, y, w, h) в NANOPIX.
- Исполнение: NANOPIX получает координаты и корректирует свое поведение отностельно объекта. На этом этапе вы можете использовать эти данные в своих программах для дрона, как это обычно делается в случае стандартного программирования полета. Т.е. вы можете получить данные об объектах в своей программе на Arduino или в блочной среде и использовать их для формирования логики движения дрона.
¶ Работа с экосистемой MaixHub
Модуль поддерживает загрузку любых нейросетевых моделей, оптимизированных под чип Sophon SG2002.
- Перейдите в открытое комьюнити MaixHub: https://maixhub.com/
- Выберите готовую модель (распознавание лиц, жестов, дорожных знаков или специфических объектов).
- Скачайте модель в формате
.mudили.kmodel. - Загрузите файл в папку
/root/models/на модуле через MaixVision. - Адаптируйте распознаваемые и отправляемые данные в
MAIX_CSV.py(или своем скрипте) в зависимости от вашей задачи.
¶ Особенности взаимодействия
- Скорость потока: Оптимальная частота отправки данных — 10-13 Гц. Это обеспечивает плавность хода без переполнения буфера контроллера.
- Приоритет управления: Команды от модуля зрения выполняются только тогда, когда дрон находится в режиме активной миссии (активируется тумблером на пульте или в приложении).
- Безопасность: В вашей программе следите за тем, что модуль действительно присылает вам актуальные данные, в противном случае осуществляйте остановку миссии и автоматическую посадку дрона NANOPIX.
¶ Подготовка к полету
- Убедитесь что модуль закреплен сверху дрона (установлен вместо штатной прозрачной крышки).
Из ИИ модуля выходит один коннектор с 4 проводами. Правильное подключение модуля к полетному контроллеру NANOPIX:
- Проверьте через консоль MaixVision, что скрипт запущен.
- Запустите миссию на дроне. В случае если скрипт на модуле запущен раньше миссии на квадрокоптере, может потребоваться нажатие кнопки запуска миссии несколько раз.
- При потере цели в кадре дрон зависнет на месте. Для завершения миссии воспользуйтесь соотвествующей кнопкой в приложении или на пульте.
NANOPIX Plus с установленным ИИ модулем выполняет автономный полет по программе:
