City: Test Saint Petersburg Novosibirsk Kazan Language: Русский English

Photogrammetry (3D Reconstruction)
Saint Petersburg / spring 2021, посмотреть все семестры

Enroll in the course to get notifications and to be able to submit home assignments.
Register to enroll now Login

Фотограмметрия позволяет по большому числу (от сотен до десятков тысяч) фотографий одной и той же неподвижной сцены/объекта получить трехмерную модель.

Примеры применения: сшивка спутниковых снимков, построение карт и ортофотопланов, создание трехмерных моделей городов, сканирование замков/статуй/предметов искусства для сохранения культурного наследия, построение цифровых моделей людей/объектов для игровой/кино-индустрии, различная аналитика (здоровье растительности в сельском хозястве, мониторинг ЛЭП, поиск трещин в мостах/огромных трубах ядерных реакторов).

В рамках курса рассказываются и в формате домашних заданий предлагаются для реализации ключевые этапы фотограмметрической обработки: от поиска и сопоставления ключевых точек на фотографиях и определения взаимного расположения этих фотографий (Multiple View Geometry) до построения попиксельных карт глубины фотографий и реконструкции цветной высокодетальной полигональной модели поверхности (Multi-View Stereo).

От слушателей ожидается знание алгоритмов, структур данных и C++. Рекомендуются (но не обязательны) базовые навыки разработки на видеокартах, т.к. многие этапы обработки будут обсуждаться в т.ч. через призму как это ускорить (и часто окажется что ответ - видеокарты), но в домашках достаточно выполнить задание на обычном C++.

Date and time Class|Name Venue|short Materials
10 February
00:00–01:30
Локальные ключевые точки SIFT, Lecture Конференция в zoom, Онлайн slides,  videofiles
17 February
00:00–01:30
Сопоставление ключевых точек (методы фильтрации, склейка панорам), Lecture Конференция в zoom, Онлайн slides,  videofiles
24 February
00:00–01:30
Определение взаимного расположения пар камер, Lecture Конференция в zoom, Онлайн video,  files
03 March
00:00–01:30
Уточнение расположения камер и их калибровок (Bundle Adjustment), Lecture Конференция в zoom, Онлайн slides,  videofiles
10 March
00:00–01:30
Карты глубины: ректификация стереопары, SGM (Semi-Global Matching), Lecture Конференция в zoom, Онлайн slides,  videofiles
17 March
00:00–01:30
Карты глубины: PatchMatch, Lecture Конференция в zoom, Онлайн slides,  videofiles
24 March
00:00–01:30
Обнаружение 3D проводов, Lecture Конференция в zoom, Онлайн slides,  videofiles
31 March
00:00–01:30
Фильтрация и объединение карт глубины в облако точек, реконструкция 3D модели из облака точек (Poisson), Lecture Конференция в zoom, Онлайн slides,  videofiles
07 April
00:00–01:30
Реконструкция 3D модели (Delaunay triangulation + Graph min-cut), Lecture Конференция в zoom, Онлайн slides,  videofiles
14 April
00:00–01:30
Самая лучшая лекция. Реконструкция 3D модели вариационными методами. Out-of-core, Lecture Конференция в zoom, Онлайн slides,  videofiles
21 April
00:00–01:30
Построение текстуры, Lecture Конференция в zoom, Онлайн slides,  videofiles
28 April
00:00–01:30
Автоматическое планирование 3D съемки с дрона, Lecture Конференция в zoom, Онлайн slides,  videofiles
22 May
00:00–01:30
Консультация перед экзаменом, Seminar Конференция в zoom, Онлайн files