roboforum.ru

В архиве StereoVision 1.0beta.rar содержится пример использования библиотеки deepmeter.dll. Пример написан на Дельфи 7. В библиотеку подаётся два изображения 320х240(точнее указатели на него), а на выходе получаем КГ 320х240 для левого ракурса, никаких других данных вводить не требуется. Но без труда библиотеку можно запустить из любого языка программирования.

На входе в библиотеку нужно подать две матрицы 320x240хRGB(24бита) с левой и правой камеры.
На выходе будет матрица 320х240, где каждое значение будет равно либо 0(не найденно), либо от 1 до 50. Эти значения и будут говорить об удалённости каждого пикселя изображения от камеры. Перевести их в физические величины измерения нужно будет самостоятельно. Проще всего замерить опытным путём, т.к. оно зависит от стереобазы съёмки.


Требование к стереопарам:
1. Разрешение должно быть 320х240
2. Правильная последовательность ввода изображений в библиотеку(типа левую в левый, правую в правый).
3. Убрать дисторсию и любые другие геометрические искажения картинок.
4. Оси камер при съёмке должны быть параллельны.

Стереопары для тестов я брал в основном с http://vision.middlebury.edu/stereo/. Там у них убрали искажения и есть проверочные карты глубины, построенные с помощью структруированного света. А так же случайные из интернета.

В библиотеке выставлены определённые(подобранные мною империческим путём ) наиболее универсальные настройки. Крутя которые(сейчас не доступных для изменения) можно получать лучший результат для определённого рода стереопар, но при этом ухудшается результат у другой группы.

Представлена картинка иллюстрирующая зависимость параллакса от расстояния. Т.е. градация измерения меняется с ростом расстояния.

Отредактирую "шапку" с более точным описанием и целями чуть позже. Ещё позже выложу теорию стереозрения. Появляющиеся проблемы/вопросы давайте писать в этой теме.

Само собой пробовал на большем числе(для теста у меня порядка 30 стереопар), алгоритм максимально универсален.

Требование к стереопарам:
1. Разрешение должно быть 320х240
2. Правильная последовательность ввода изображений в библиотеку(типа левую в левый, правую в правый).
3. Убрать дисторсию и любые другие геометрические искажения картинок.
4. Оси камер при съёмке должны быть параллельны.

Всё, на основе этого библиотека построит КГ 320х240, каждый пиксель которой либо будет равен 0(не найдено) либо от 1 до 50. 50 при этом это максимальная близость объекта к камерам.

От расстояния между камерами зависит многое. В первую очередь коэффициент, который нужно будет разделить на значение каждого пикселя КГ, для того чтобы получить расстояние в физической величине(типа см, метры и т.д.).

Улучшать можно до бесконечности. Я так дальше и собираюсь делать. Но это лишь компонент, из системы. Сначала я планирую собрать мало мальски рабочую навигацию. А дальше, в зависимости от полученного опыта улучшать отдельные компоненты. Кстати, что значит решена в лоб? Если вы посмотрите остальные решения в этой области(кроме NASA'овских, но и у них есть существенные минусы) то быстро поймёте, что такой результат более чем приемлемый для данной задачи. Недостатки будут компенсироваться потоком таких КГ. Из этого потока и нужно будет устанавливать наиболее "устойчевые зоны", которые и пойдут на составление карты.

Да, Minoru 3D хорошо подойдёт для стереозрения. Я уже где то писал про эту камеру. Стоить правда могла бы и поменьше. Но с текущими темпами "пропихивания" 3D на рынки развлечений(игры, кино), скоро должны появиться и альтернативные модели. Я пока сделал голову робота из двух одинаковых вебкамер chicony.

А что на выходе-то?
И еще не очень понятно, откуда эти квадраты берутся, что означает их цвет (или это просто "от балды"?) и т.п.

Объединил точки со схожими векторами движения в опорные зоны. Теперь возможно по таким зонам узнать такие характеристики как масштаб, угол поворота, смещение. В общем наконец началась геометрия .