仅仅从卫星图像就能构建高质量三维城市了。🥹
Skyfall-GS|从卫星图像生成可漫游的 3D 城市块
Skyfall-GS 是一个把多视角卫星影像转换成大尺度、可实时浏览的 3D 城市场景的研究/开源项目。它不是普通“卫星图 → 高度图”,而是把卫星重建、3D Gaussian Splatting 和扩散模型纹理细化接在一起,生成可以自由飞行漫游的 city-block scale 场景。
它解决的问题:高质量 3D 城市生成最大瓶颈通常是缺少大规模、真实、精细的 3D 扫描数据。Skyfall-GS 换了一条路:不用昂贵 3D 标注,直接利用更容易获得的多视角卫星图像,先恢复粗几何,再用扩散模型补近景质感。
方法上,它先用 3DGS 从多视角卫星图像重建初始城市 3D 场景,并加入 pseudo-camera depth supervision 补几何约束;再处理多日期卫星图里的光照、季节、阴影差异;最后用 IDU / Iterative Dataset Update,把当前 3DGS 渲染结果送入预训练 T2I diffusion model,通过 prompt-to-prompt editing 改善纹理、细节和伪影,再反过来更新训练集。
为什么值得看:它把“遥感 / 地球观测”推进到“可进入的 3D 世界生成”。这对数字孪生、城市模拟、游戏地图、灾害推演、机器人/无人机训练、MiroWorld 这类世界模拟系统都很有意义。
一句话:地图正在从被阅读的表面,变成可进入的世界。
X:http://t.cn/AXi6PNWq(原帖)
GitHub:http://t.cn/AXi6PNWt(项目)
项目页:http://t.cn/AXi6PNWG(Viewer)
论文:http://t.cn/AXi6PNW5(arXiv)
视频:http://t.cn/AXi6PNWb(Teaser)
#HOW I AI# #ai生活指南# #3D重建#
