QGIS: Georreferencia tu video usando puntos de control en fotogramas clave
Exporta fotogramas del video, georreferéncialos como raster en QGIS usando puntos del mundo real, y luego usa el complemento "Freehand Raster Georeferencer" para generar un ráster deformado que alinee perfectamente tu escena 3D con la perspectiva del video.