最近国外一个博主发了一个很酷的。。。。。中,摄像机镜头仿佛骑着筋斗云,以各种不可思议的角度绕着汽车飞来飞去,汽车周围的场景瞬间变化,如同进入了一个多元宇宙。短短几十秒的。。,靠着这个疯狂的镜子,
还有流畅的场景转换,居然收获了40多万的播放量。
在评论区,除了对。。的称赞,也有围观者对制作过程产生了好奇,开始猜测。。是如何制作的。
于是我把这个。。拿给我们公司的摄影师,问他能不能也给我们拍一个这样的。。。结果摄影师看到这个。。,直呼不可能!说这肯定是做了一些特效,或者剪辑过的。如果能在现实中直接拍出这种效果,
他当场辞职了!这个摄影师确实做不到,我们回头看看这个博主的推文。其中提到,这段。。是用名为NeRF的最新技术制作的,文末还签了一个名为“LumalabsAI”的账号。好家伙,
这个名字好像又是艾的全部工作了!于是我就跟着“LumalabsAI”的账号,摸到了它的官网。首先映入你眼帘的是他们的宣传。。。一个个来看,这个宣传片里的镜子真的有点臭。
而所有这些效果都是由LumalabsAI开发的一款名为“LumaAI”的APP来完成的。
在这个应用的介绍中,它是这样介绍自己的:“Luma是一种通过AI用iPhone创建令人难以置信的逼真3D的新方法。无论你在哪里,都可以轻松捕捉产品、物品、风景和场景。
创建电影制作。。,抖音和摄像机运动,这在现实中是不可能的,从你的捕捉,或只是重温那一刻。你不需要激光雷达或花哨的捕捉设备,你只需要一个iPhone 11或更新的型号。“简单地说,
也就是只要你有一部Apple 11以上的手机,只需要拍一些场景周边的照片,就可以用这个APP生成照片场景的3D场景。
看到这种简单,史超有点感动,于是他立即下载了一个来试试。打开应用程序,将橙子放在盒子上。几分钟之内,这样的场景就产生了。
虽然在远处缺乏照片信息的地方,整个场景效果并不好,但是在近焦部分,整个橙和盒子的细节还是很还原的。在其官网也有很多用户上传的场景演示。比如下面这个青铜像,如果我不告诉你,
很难发现这其实是一个3D场景。因为它不仅完美还原了大象的细节,还完整再现了周围的光线、阴影甚至透明玻璃的效果。
LumaAI不仅可以还原铜像的小场景,还可以为你还原航拍的超大场景。比如有用户用航拍机拍了一个小镇的全景,然后用LumaAI把整个小镇进行3D还原,看看效果。
只突出一个“真”。
用LumaAI创造出这些3D场景后,你只需要把场景放到3D软件里,然后加上一个虚拟摄像头,剩下的效果就呈现出来了,就看这些创作者的创意了。就像这个油管博主,为了满足自己日益增长的爱好,
我创造了一个场景,然后放大身体,做了一个类似巨人入侵的特效。
除了重建3D场景,LumaAI还可以重建单个3D模型,比如通过拍照直接生成高达模型,然后放入虚幻引擎,让整个场景瞬间有了科技感。与传统的单线建模方法相比,这种建模方法可以节省大量的精力。
其实像LumaAI这种3D重建的软件还有很多。AppStore中的Polycam可以通过苹果自己的雷达扫描来估算距离和点云信息,从而重建一个3D场景。
但是LumaAI不仅不依赖雷达扫描,效果还是那么好。这离不开这样一项技术,就是博主开头提到的NeRF(神经网络辐射场)。这个NeRF在2020年的ECCV。。上首次发布。
不仅获得了年度最佳论文,还通过自己的努力成功开启了计算机视觉的另一个研究方向。NeRF的基本原理是通过大量带有位置信息的2D照片训练一个神经辐射场模型。通过这种模式,
你可以从任何视角获得清晰的照片,这意味着你可以通过这个训练好的模型重建一个3D场景。
此外,自这篇论文发表以来,基于NeRF的各种分支技术如雨后春笋般出现。华盛顿大学和Google联合提出了HumanNeRF,主要用于人体的3D重建。
还有用于场景风格迁移的风格化dNeRF。通过拍照,生成3D图像,然后把整个场景风格转化成你想要的风格。
还有东京大学提出的动画方向的NeRF,这个项目就不单单是生成一个静态的场景了,它甚至可以把运动的角色和物体都给你生成出来。
像这类的分支研究,已经多到一篇文章写不下来了,世超就不再这里一一展示了。
不过世超是巴不得NeRF 这个方向的研究越来越卷,毕竟只需要通过照片就能生成一整个复杂的3D 场景,这对于生产力解放的帮助可不要太大。去年Epic 收购的公司Capturingreality,
它们的产品主打的就是通过照片来生成高精度模型。
这种只需要一部手机,就能把现实搬进虚拟世界的技术,在未来,不仅仅是制作。。的自由度更高。游戏行业,工业场景,甚至是在线教育,都可能迎来翻天覆地的变化。到时候,虚拟和现实,可就真的傻傻分不清楚了。
标题:一台iPhone就能拍大片,摄影和建模师又要被卷了
链接:https://www.52hkw.com/news/rj/63251.html
版权:文章转载自网络,如有侵权,请联系删除!