点击下方
卡片
,关注
「3DCV」
公众号
选择
星标
,干货第一时间送达
编辑:3DCV
添加小助理:dddvision,备注:方向+学校/公司+昵称,拉你入群。文末附3D视觉行业细分群。
扫描下方二维码,加入
3D视觉知识星球
,星球内凝聚了众多3D视觉实战问题,以及各个模块的学习资料:
近20门视频课程(星球成员免费学习)
、
最新顶会论文
、计算机视觉书籍
、
优质3D视觉算法源码
等。想要入门3D视觉、做项目、搞科研,欢迎扫码加入!
作者:清风似少年
链接:https://www.zhihu.com/question/646965266/answer/3461801393
我已经以身入局了
我最近就在研究3d gaussian splatting,看相关的论文,复现代码。
一、基本介绍
我是去年刚入学的研究生,我们实验室、有16张显卡,主攻方向就是各种图像,然后三维重建这个方向是我一个学长带我入门的,他的毕业论文方向就是三维重建,我是从NeRF开始对三维重建感兴趣的,所以我就一路看论文、复现论文,从NeRF、mip-NeRF、mip-NeRF 360,到现在的3D Gaussian Splatting、mip-3D Gaussian Splatting等等
学习资料整理
vscode代码复现
展示一下我做的一些工作,其中包括
渲染结果、导入虚拟引擎、编辑3DGS(去除伪云)和最新论文介绍
,并且我会不断更新我的学习经历:
3DGaussianSplatting技术的影响会有多大?www.zhihu.com/question/626506306/answer/3454762596?
3d gaussian splatting输入数据如何获取?www.zhihu.com/question/632773209/answer/3463714670?utm_psn=1762176178776264704
二、个人观点
我觉得这个技术真是个好技术,他仅用消费级显卡、较短的时间成本,能得到非常好的重建效果。因此,我认为未来会在各行各业,产生革命性影响,尤其是无人驾驶、VR、医学成像等行业
3dgs导入虚幻引擎然后,就我自身了解,这个方向确实会非常卷,在NeRF上尝试的各类方法,感觉都会在3DGS上尝试一遍,基本上和萝卜坑一样,所以确实是研究越快越好,很有可能自己刚刚入门,发现人家都发表完了。
最常见的研究是追求质量提升(Quality Enhancement)
:
GaussianPro、MipSplating、Spec Gaussian、Scaffold GS
压缩正则化(Compression and Regularization)
:C3DGS、Compact3D、EAGLES
动态三维重建(Dynamic 3D Reconstruction)
:4DGS、SWAGS
挑战性数据输入(Challenging Inputs)
:FSGS、SparseGS、GaussainObject,包括稀疏、城市级、复杂着色效果输入
不过我觉得这个技术本身还是很前沿的,还可以做一些可编辑性研究或者实际应用性研究
,也是能水一篇论文的,我感觉我可能就是这个方向,因为我就是对这个技术的应用很感兴趣。
比如,可以将Sora和3DGS结合、3DGS与各种实际行业的结合(VR、AR)、编辑3DGS模型(Geometry Editing and Appearance Editing)、几何重建(转Mesh)、SLAM、数字人、数字手、数字头等等