12. Фотограмметрия: карты глубины методом Patch Match

preview_player
Показать описание
Лектор - Полярный Николай Вадимович

Тайминги:
0:00 Напоминание про SGM построение карт глубины
2:25 Недостаток SGM: фронто-параллельность (игнорировали угол наблюдения)
6:04 Учитываем угол наблюдения поверхности благодаря нормали поверхности
12:14 В каждом пикселе ищем глубину + нормаль
13:44 Недостаток SGM: блики и регулярные повторяющиеся структуры
14:36 Учитываем несколько соседних камер
22:53 Улучшаем реконструкцию тонких структур уменьшая патч
27:54 Итого: идеи улучшения построения карт глубины
28:15 Измеряем похожесть (cost) с другой камерой (unproject+project)
32:41 Объединяем похожести (costs) нескольких других камер (усреднив)
35:40 Псевдокод рассчета похожести (cost) с другой камерой (unproject+project)
46:30 Отсылка на эпиполярную геометрию
52:00 Итого: был куб-диспаритетов, теперь пространство поиска глубин+нормалей
56:59 PatchMatch (Barnes et. al., 2009): задача ретуширования фотографий
1:05:20 PatchMatch: однородная структура картинки + закон больших чисел
1:08:52 PatchMatch: псевдокод алгоритма (propagation + refinement)
1:21:20 PatchMatch: результаты
1:24:46 Адаптация PatchMatch для задачи реконструкции карты глубины
Рекомендации по теме
Комментарии
Автор

0:00 Напоминание про SGM построение карт глубины
2:25 Недостаток SGM: фронто-параллельность (игнорировали угол наблюдения)
6:04 Учитываем угол наблюдения поверхности благодаря нормали поверхности
12:14 В каждом пикселе ищем глубину + нормаль
13:44 Недостаток SGM: блики и регулярные повторяющиеся структуры
14:36 Учитываем несколько соседних камер
22:53 Улучшаем реконструкцию тонких структур уменьшая патч
27:54 Итого: идеи улучшения построения карт глубины
28:15 Измеряем похожесть (cost) с другой камерой (unproject+project)
32:41 Объединяем похожести (costs) нескольких других камер (усреднив)
35:40 Псевдокод рассчета похожести (cost) с другой камерой (unproject+project)
46:30 Отсылка на эпиполярную геометрию
52:00 Итого: был куб-диспаритетов, теперь пространство поиска глубин+нормалей
56:59 PatchMatch (Barnes et. al., 2009): задача ретуширования фотографий
1:05:20 PatchMatch: однородная структура картинки + закон больших чисел
1:08:52 PatchMatch: псевдокод алгоритма (propagation + refinement)
1:21:20 PatchMatch: результаты
1:24:46 Адаптация PatchMatch для задачи реконструкции карты глубины

polarnick