机器之能报道
编辑:Sia
手机做的殊效,居然也能骗过我的眼睛。
这是一组让人怀疑双眼和大脑的视频,我打赌很多人很难分辨哪些东西是假的……
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
桌子上一堆东西,哪些是真实的物理存在,哪些是添加的 3D 模型?机器人跑酷时,手足与长凳交互的方式近乎无缝甚至还有熟悉的机械声(记得打开音量),是不是感觉很逼真?
就连日本 3D 建模大神 Hirokazu Yokohara 也加入了体验行列。她只花了几分钟就将一个四足机器人模型植入到真实场景中。
来自@Yokohara_h
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
所有这些视频都是在苹果手机上创作完成的(你相信吗?)。通过一个叫 Simulon 的苹果手机使用(视觉殊效对象),非专业玩家也能创办和衬着这样的视频,只需几分钟!比如这个:
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
这段视频的衬着过程只用了 10 分钟:
来自X网友@DonAllenIII,用手机拍摄实景用了5分钟,衬着用了10分钟。声音和后期编辑使用了其他使用。
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
“Blender(一种 3D 建模对象——编者注)中的光照和衬着设置是自动的,所以,我只需从 iPhone 发送图象并按下衬着按钮即可。如你所见,质量并不完美,但这种使用程序很热门,” Hirokazu 评论道。
去年年底,Simulon 就放出一些 demo 视频,让人们看到了将移动技术与高质量视觉殊效相结合的可能。今年 4 月,开发团队向选定的一组人提供了 Simulon 的测试版,于是就有了这些精彩视频。坊间推测这款使用很有可能在明年年初对广大公众开放。
记得《猩球崛起》里的凯撒吗?它也去逛了一趟自然历史博物馆。来自X网友@elsableda
来自X网友@@XRarchitect
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
Simulon 的工作原理并不复杂。3D 模型需要你事先准备好(主流的原生 3D 财产都支持,比如 blender、glb、usdz ),然后打开使用,拍摄实景。
Simulon 会利用手机摄像头实时追踪场景中的物体和环境,生成深度信息、光照信息等后续衬着所需数据。拍完实景后,上传 3D 模型,设置照明、暗影和反射效果等内容。
衬着工作是在云端完成。服务器会根据上传的场景数据和 3D 财产(如恐龙、机器人等)等内容,使用专门软件和算法进行衬着。强大的计算资源可以处理复杂的视觉效果,如动向暗影、反射、折射等,这些效果在本地设备上难以实时实现。
完成后,用户就可以从云端下载高分辨率的视频了。
Simulon创始人兼CEO Divesh Naidoo解释对象的运作原理。
Simulon 核心技术之一在于设计了一种独特的照明系统——利用机器学习算法将用户手机拍摄的低动向规模( LDR )画面直接转化成一个 360 度的高动向规模( HDRI )图象。所谓“高动向规模”是指在影像或影片中,最亮部分和最暗部分的光度差异很大。这就像给你的苹果手机内置了一台虚拟摄像头,自动同步、模拟物理摄像头对光线的反应,生成高动向规模图象。
独特照明系统的工作原理
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
事实证明,把握住复杂的光影艺术就能赋予虚拟财产难以置信的真实感。你看这个琥珀,不断改变手机观察角度,光线明暗也随之变化:
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
你甚至可以在这个视频里看到蓝色球体反射到地面上的微微蓝光,就像它们真在那里一样。
来自X网友@@XRarchitect
一台机甲漫步在树木林立的小路上,时而经过树荫,时而又有阳光直射在身上。首先,作者在 3D 建模对象 Blender 中,通过放置光栅( light gobos )来模拟树叶在机甲上投下的暗影效果,并使用亮度遮罩来确保机甲的暗影不会与实际地面的暗影重叠。然后,才将机甲模型放到 Simulon 进行衬着(还支持声效哦), 达到更逼真的视觉效果。
来自 Divesh Naidoo
视频链接:https://mp.weixin.qq.com/s/ZSTkk_qyqNzMESPYX_8T6A
顺便提一句,Simulon 是一家南非的初创公司,创始人兼 CEO Divesh Naidoo 在 VR/AR 领域工作多年,为 MTV、KFC、梅赛德斯 – 奔驰和 BBC 等知名公司提供过服务。他在 2019 年创办了 Simulon,希望将好莱坞制片厂的能力交到拥有消费级硬件的独立创作者手中。
他在接受采访时曾提到,Simulon 不仅仅是为了专业视觉效果艺术家设计的,而是为了那些有创意但可能没有 3D 技能的人设计的。他为这款产品设想了一个潜在的 3D 财产市场,用户可以在其中购买或下载艺术家创办的财产,并在现实世界中使用这些财产创作内容。
这里是申请内测的传送门:
https://simulon.typeform.com/betatest?typeform-source=t.co