去年折腾了好一段时间,那时候3DGS还在发展,虽然现在也还是,不过明显已经好很多了,好多东西都能本地玩了。
准备用Claude Code折腾一个一键部署的,从视频转SOG的套件玩下。COLMAP ffmpeg 将视频处理成colmap,然后用gsplat转成点云,用SplatTransform 压缩成sog格式,最后用PlayCanvas Viewer做个管理软件,看sog。试试能不能把娃的一些视频做成三维模型,那个效果应该还行,现在发展的真快,处理算法对显存要求降下来了,转换压缩后sog的体积也降下来很多,比原始ply点云要小的多。
虽然整理过,这玩意实际相当于一个投影,但是渲染效果真的牛逼啊。我先试试看看。
周末带娃顺便用claude跑了一下,AI虽然好用,但是吃token真狠啊,吃了30%的小米月度计划,跑出来了,效果还可以,我晚上再改吧改吧把地址发下
用一个玩具试了下,感觉还是有些问题,不过毕竟机器一般,可以玩。
暂时比较忙,没时间继续折腾了。现在效果有几个问题,很多碎屑,速度一般,效果还有待改进。看了下论文有很多有改动,但是吧,我机器好像不是特别能跑起来,显存看起来不够玩。。。
项目地址: https://github.com/wuqi/onekeyGS ,安装参考doc/setup.md,
准备再试试搞个现成的系统看看到底开源的跟系统的差多少。
效果感觉还是可以玩的,挺有趣。我倒是希望有啥旅游宣传的或者什么博物馆可以大量用用这个。但是现在如果是小片的话,手动清理干净太困难了点,自己跑还得好机器,有点麻烦,有时间再试试吧,反正技术总是缓慢进步中,去年这时候splat模型还大的没法玩呢。