近日,厦门大学多媒体可信感知与高效计算教育部重点实验室在三维视觉领域取得重要进展。由信息学院2023级博士生曲延松,曹刘娟教授(通讯作者),2024级硕士生陈典,2023级博士生李新阳,百度研究员李晓帆,张声传副教授,纪荣嵘教授合作完成的论文 “ Drag Your Gaussian: Effective Drag-Based Editing with Score Distillation for 3D Gaussian Splatting” 被国际学术会议SIGGRAPH 2025接收。SIGGRAPH (Special Interest Group for Computer GRAPHICS)是计算机图形学领域的顶级国际会议,也是中国计算机学会推荐的CCF-A类会议,主要收录来自于三维建模、三维生成、几何处理、可视化以及虚拟现实等领域的高质量论文。

本论文针对现有三维场景编辑难以实现与需求一致的几何变换、精准控制等难题。提出了一种基于3D高斯泼溅的高质量拖拽编辑方法。该方法通过三维掩码与三维拖拽点对标注编辑区域,实现空间一致的拖拽引导。设计显隐式结合的三维表征策略,融合3D高斯泼溅的实时渲染显式特性与三平面表示的空间连续隐式特性,有效解决了3D高斯泼溅空间分布不均导致的欠优化问题。同时提出 Drag-SDS 损失函数,有效利用生成模型先验,引导编辑过程向用户设定的目标几何状态优化,实现与拖拽意图一致的编辑效果。实验结果表明,该方法能够实现高质量、细粒度的三维场景编辑,在真实与生成场景中均有稳定的泛化性。

本论文作为基于三维高斯的场景拖拽编辑的前沿研究工作,为三维的场景编辑及应用提供了新的思路与技术支撑,体现了团队在三维视觉、生成领域的前沿研究实力。

该论文代码已开源,相关链接如下:

论文地址:https://arxiv.org/abs/2501.18672

项目主页:https://quyans.github.io/Drag-Your-Gaussian/

开源代码:https://github.com/Quyans/Drag-Your-Gaussian