Инженер / технический специалист по сбору и обработке видеодатасетов

Мы развиваем проект по сбору real-world видеодатасетов для Physical AI и робототехники. На текущем этапе аппаратная часть уже выбрана: у нас есть stereo camera module с Global Shutter, IMU и аппаратной синхронизацией. Сейчас нам нужен технический специалист, который поможет запустить комплект в реальной работе, настроить стабильную запись данных и дальше выстроить процесс обработки, разметки и подготовки датасетов.

Нам не нужен узкий академический специалист по робототехнике. Нужен практический технический человек, который умеет: разобраться в новом железе, настроить систему, написать небольшой сервис или скрипт, провести тест, найти проблему и довести решение до стабильной работы.

Первая конкретная цель: получить уже заказанный stereo camera module, подключить его, настроить запись stereo video + IMU + timestamps и провести реальную тестовую сессию. Затем выстроить pipeline от сырой записи до размеченного датасета.

Обязанности:

Первая задача — не разрабатывать устройство с нуля, а научиться стабильно работать с уже выбранным оборудованием.

Что предстоит делать:

- подключить и настроить stereo camera module на Linux;

- разобраться с SDK, драйверами и документацией производителя;

- настроить стабильную запись stereo video + IMU + timestamps; - организовать запись на локальный SSD;

- контролировать dropped frames, синхронизацию, температуру, питание и объём данных;

- провести серию реальных тестов на человеке в рабочей среде;

- добиться стабильной записи сначала 1–2 часа, затем 5–8 часов;

- организовать структуру хранения сессий и метаданных;

- разобраться с calibration, intrinsics/extrinsics и rectification;

- подготовить pipeline для последующей обработки видеоданных;

- настроить или адаптировать инструменты разметки;

- работать с CVAT / Label Studio / FiftyOne или аналогичными инструментами;

- помогать автоматизировать разметку: hand tracking, object tracking, segmentation, episode slicing;

- контролировать качество данных и формировать понятный dataset на выходе.

На следующем этапе:

- автоматизация обработки больших объёмов записей;

- разбиение смен на отдельные действия и эпизоды;

- подготовка данных в форматах для imitation learning / VLA / robotics;

- возможная интеграция SLAM/VIO, hand pose и object tracking;

- масштабирование системы на несколько комплектов и операторов.

Требования:

Что желательно знать:

- Linux / Ubuntu;

- Python; - базовый C/C++;

- OpenCV;

- Git; - USB / UVC / V4L2;

- работа с камерами и видеопотоками;

- IMU и timestamps;

- работа с большими файлами и локальными накопителями;

- понимание основ computer vision.

Будет плюсом:

- опыт с Raspberry Pi / Radxa / Orange Pi / Jetson; - ROS / ROS2; - SLAM / VIO; - Kalibr; - CVAT / Label Studio / FiftyOne; - FFmpeg / GStreamer;

- опыт подготовки датасетов;

- опыт в робототехнике или embedded Linux.

Условия:

- На первом этапе - проектная работа; дальше возможна постоянная занятость;

- часть задач можно выполнять удалённо;

- тестирование оборудования и съёмки — в Красноярске;

- Всё оборудование предоставляем.

- Оплата обсуждается индивидуально по итогам собеседования и зависит от опыта и формата сотрудничества.