实时可编辑3D重建!鼠标拖拽就能控制,港大VAST浙大联合出品(3d鼠标设置)

AIGC动态欢迎阅读

原标题:实时可编辑

3D重建!鼠标拖拽就能控制,港大VAST浙大联合出品

关键字:场景,动态,编辑,建模,刚性

文章来源:量子位

内容字数:3866字

内容摘要:

SC-GS团队 投稿量子位 | 公众号 QbitAI最近,高斯溅射(Gaussian Splatting)在新视角合成领域掀起了一轮革命性浪潮,取代上一代技术神经辐射场(NeRF)成为学界业界顶流。而真实场景往往是动态的,如何合成动态场景的新视角是更具价值与挑战的领域。

随着图形学与AI的发展,数字资产的创造日益引起人们的重视。对于重建的真实场景进行编辑也是AIGC领域业内关注的热门方向,其为制作数字资产提供了高效与便捷。

香港大学CVMI实验室携手3D大模型公司VAST与浙江大学,提出了目前SOTA的动态高斯溅射模型SC-GS,并支持用户交互式实时编辑重建的场景。

△面向可编辑动态场景的稀疏控制高斯溅射SC-GS支持用户对重建的动态高斯进行实时交互编辑,制作新的场景运动或形状:

使用鼠标的拖拽与键盘组合按键就能够方便的操作。

△实时交互编辑怎么做到的?SC-GS的灵感来源于对自然世界大多数动态过程的观察,由于物质大多数都是刚性或连续的,因此物体的移动往往可以由稀疏的变形基底表示,并不需要稠密的变形场进行建模。

摒弃了大多数现有方法对动态场景的变形场进行稠密建模的方案,SC-GS突破性

原文链接:实时可编辑3D重建!鼠标拖拽就能控制,港大VAST浙大联合出品

联系作者

文章来源:量子位

作者微信:QbitAI

作者简介:追踪人工智能新趋势,关注科技行业新突破

0
分享到:
没有账号? 忘记密码?