空间拍摄打开3D世界的大门!

发布时间:2024-10-13     点击量:

人类所处的就是3D

世界,遗憾的是人类的数字信息内容绝大部分都是以2D的形式记录和呈现的,当然我们对3D数字世界的追求是无止境的,例如基于3D引擎打造的3D游戏,3D建模的呈现,3D打印,又例如电影院观看3D电影。

带上3D眼镜在

电影院看3D电影,是什么原理?

人的两个眼睛大概是65毫米的瞳距,看不同位置的物体两个眼睛看到的画面是不一样的,这种双目视差在大脑的处理下就会感知到深度信息,并形成立体视觉效果。

所以3D电影是模仿人类的双目视觉,用两台类似瞳距的摄影机拍摄的电影,在电影院放映时快速切

两个摄像机画面,3D眼镜(红蓝或红绿滤光片镜片)滤光后让观众两只眼睛看到不同的摄像机画面,从而形成双目立体视觉效果。

与大部分2D电子端不同,VR/AR是天然的3D端,因为可以直接给两个眼镜看两个有视差的画面形成双目立体视觉。不过,由于XR终端数量少,愿意为这么少的终端制作3D内容的人很少,也就看看3D电影和一些小众专家制作的内容,很快就吃灰了。

字节跳动是全球最火的短视频内容平台公司,90亿收购PICO后,在应用生态建设上下足血本,视频就是重中之重,VR版抖音的PICO视频APP应运而生。除了购买大量3D内容版权,还找来众多MCN公司合作,直接买下昂贵的VR摄影机(1台14万,用完要锁保险柜那种)免费给他们使用,有了这个就可以拍VR视频,VR直播,还办了几场VR演唱会。

14万的VR摄影机什么来头?

这是米七科技和西顾视频的联合出品,一款两个专业级摄像头组成的180度视场角的VR摄像机。

从上面这个VR摄影机几个特点:

1、12K/30帧和8K/60帧的双目拼接最高输出画质(XR2芯片最高的解码极限就是8K/60帧),按H265最大码率400Mbps,可机内推流直播,PICO直播采用火山视频引擎更先进的编码解码方式降到20Mbps实现8K直播。。

2两个摄像头参数一样(人眼也是),单目3600万像素,“底大一级压死人”,采用的是全画幅CMOS图像传感器保障了成像品质(目前顶级旗舰手机主摄最强也就1英寸)。

3、两颗摄像头间距65mm是完全拟人眼瞳距,这样的效果最好

4、180度双鱼眼镜头,一般手机超广角镜头只有120度左右,说明VR拍摄对FOV要求很高。用过广角拍照的都明白,画面边缘容易变形,当然可以通过镜片或者算法进行畸变优化。

这个专业的VR摄像机的特性为我们提供了3D空间拍摄硬件的诉求,一笑还是很喜欢PICO视频APP,即便字节很努力了,可视频内容还是有限,这么点终端VR直播价值有限,难以吸引更多的主播和专业内容生产者参与。

还有一类消费级3D拍摄相机,例如酷看QooCam EGO

这个在京东上卖2000块左右,是由两颗间距65mm摄像头(没错的话是1200万像素)组成的双目视觉相机,而且相机2.54英寸的屏幕加上目镜套件后便可直接观看拍摄的3D视频,输出的画质为1080P,也可以用别的XR观看。

上面的专业VR摄影相机和这个消费级3D相机,其实都有不错的应用场景,不过始终还是很小众。

今年6月6日苹果重磅发布了第一款空间计算(类似混合现实/MR)VISION PRO,这是一款跨越级的XR终端,不愧是最重量级选手,从硬件的算力芯片、双眼8K microOLED屏幕、12个摄像头传感器等硬件性能,还是超低延时强大的透视、3D建模、外光栅3D屏、无手柄眼手交互等产品定义都大有不同,在短短的发布会上让一笑印象最深刻的就是空间拍摄!也就是说这个AVP可以拍摄3D图片和视频,观看的时候就像“回忆”一样梦幻。在所有体验过AVP的媒体人中,无不对空间视频赞不绝口的,特别是其中一个小朋友吹蜡烛的场景,栩栩如生!

9月发布的iPhone15 的pro和pro max版本也是第一款可以拍摄空间视频的手机。

很明显,苹果不仅XR硬件出众,依托于庞大的iphone群体,这是要铺垫内容生态了,而这是META这样的互联网玩家没有的基础。

近日 iOS 17.2更新后,在相机设置中打开上图这个选项,就可以开始拍摄空间视频了,限定为30帧/1080P画质,平时手机看跟普通2D视频没什么区别,因为是两个摄像头画面,相比原来视频多了1倍的内存占用。

通过同一水平线的4800W像素的主摄和1200W超广角摄像头实现了空间拍摄,可通过VISION PRO播放,在AVP里观看还带有6Dof,不过也可以通过第三方转换格式后在其他如quest3、Pico4之类的VR观看,这也和主打观影的BBAR眼镜完美契合了,连上数据线便可便捷观看,为此Rokid还搞了个空间拍摄比赛《Rokid携手bilibili,全球首届3D空间视频挑战赛重磅开启》。

一笑最近也体验了iphone拍摄在quest3体验,说真的虽然不至于震撼,但还是有点惊艳,符合了一笑对空间拍摄的预期。说几点感受和看法:

1、3D效果

可以说还是不错的,虽然画质不够好,但也跟你在电影院看3D电影有类似的立体感了。也类似的,越靠近镜头时,3D感越强,3米以内的3D感比较强。有一个绿道上的拍摄,相比手机2D,也会有更明显的景深感。

2、空间拍摄有技巧

就跟手机拍照有技巧一样,这个空间拍摄也有,手机要水平放置,特别特别注意不能快速移动镜头,看的容易晕,要慢慢水平移动,最好是用机架固定起来拍摄。像吹蜡烛、炒菜这种烟雾飘过来,下雪、落叶这种动态捕捉很棒!

3、跟2D比强在哪

正所为耳听为虚、眼见为实,人的感受跟感官息息相关,自己拍摄好的3D内容,观看时更有临场感、真实感、代入感,更像你的回忆!这对于像求婚、接亲、小孩出生、老人祝寿等重要时刻来说,这些回忆是非常珍贵的!

4、空间拍摄技术门槛高吗?

iphone和AVP的空间拍摄都是利用了双目视觉,通过两颗摄像头实现的,从本质上来说这个技术门槛一笑认为不高。但是!传统手机摄像头模组是由不同规格的摄像头靠近组成,而通常3D拍摄是用两颗超广角和人眼接近的65mm间距而成,那么如何平衡手机日常使用和空间拍摄性能是一个问题。

例如iphone的两颗摄像头像素和视场角不同,便需要借助算法取交集,并需要优化处理。

5、空间拍摄需要用到Lidar/d tof这样的3D sensor吗?

这个是很多人关心的问题,一笑做了许多研究和专家交流后得出一个答案:不是必需的。也许会有通过lidar辅助快速对焦、通过算法增强景深,也就是说也许有起到间接增强的作用,但不会是关键作用。

6、iphone 16会全系标配吗?

大概率会,警长也有相关报道,未来也许会采用这样的模组,不一定会有Lidar。

7、安卓手机会跟进吗?

大概率会!别的手机都可以3D拍摄,安卓能没有吗?甚至会更激进!算法不够,硬件来凑!例如直接在手机下面,65mm处来多一颗超广角摄像头!

8、对摄像头会有什么影响?

空间拍摄是光学影像的巨大创新,可能未来会双主摄化,超广角镜头得到重用,考虑到未来有可能通过手机就实现VR直播,前置摄像头也可能会双摄化。所以空间拍摄最直接的可能会带来摄像头的增量和价值量逻辑。

9、空间拍摄的生态影响

过去3D内容都是PGC(专业生产),空间拍摄正式打开了UGC(用户生产)的生态模式。我们移动互联网是如何实现这两种生态转变的?这是巨大的质变。未来的3D内容生产将会井喷,是一个巨大的蓝海红利市场。.

10、对XR的影响

大家期待XR出现killer app,也许空间拍摄就是。仅iphone去年出货量就高达2.2亿台,当这些手机都能拍摄空间视频,是否会有一定比例的人需要3D终端观看?从而出现XR终端数量起来后,更丰富生态建设加速的良性循环

11、对手机的影响

想要拍3D视频,就得换新手机!这是一个巨大的换机推动力~~空间拍摄性能不断提升,叠加AI手机发展,算力性能不足,以及XR终端协同,未来的换机周期有可能重新缩短!

我们在3D空间的世界,未来的硬件和内容也会3D化!随着时间和生态的发展,未来手机的3D拍摄能力将逐步向专业VR摄像机进化,带来震撼体验。

也许就是苹果这么一个创新,空间拍摄打开了3D世界的大门!

上一篇:2000㎡拍照空间,沦陷在茶园中的法式浪漫里

下一篇:Bluehouse摄影空间|北京超火拍照实景影棚

Copyright © 2010-2024 Powered by EyouCms 非商用版 向未来视觉 版权所有 Powered by EyouCms 备案号:沪ICP备2024066551号-3

友情链接:真菌荧光染色剂 日本新闻 展会B2B 芝麻信息网 同轴连接器 直播基地 广州服务器回收 正经小说网 搜外友链