用AI的优势弥补AI的不足,视频生成赛道需要辅助型产品
距离Sora问世已经过去接近半年的时间,当初轰动一时的AI视频生成技术,被业内人士认为将颠覆好莱坞影视制作模式,更有甚者宣称演员也将下岗。 但是几个月时间过去,AI生成视频产品并没有“爆改”影视赛道,这其中最根本的原因还是在于技术的成熟度不够高,大量数据构建出的算力模型应用到实际的视频生产过程中,其效果还远没达到能颠覆行业的水平。 所以,依托AI技术而形成的专业视频编辑工具显得格外契合市场需求。 AI生成的视频是不完美的,但是用AI编辑过的视频可以尽量减少瑕疵。 Captions目前能够提供的视频编辑工具有9项,涉及视频剪辑,配字幕,高质量视频编辑等基础功能,还可以借助AI技术完成背景音消除降噪,以及利用AI帮用户剪辑出整段视频中最引人入胜的部分。 Captions的9项功能中,有三项非常惹人关注,一是视频翻译功能,目前该工具支持将视频语言翻译成28种语言,整个语言翻译过程仅需三个步骤,几秒钟之内就可以完成。 语言翻译为跨国界内容传播消除了屏障,且其翻译速度快,确实是很多跨国界内容创作者的好帮手。 另一个功能就是纠正眼神的功能,当视频中的人物眼神没有聚焦到镜头的时候,Captions可以通过后期的技术手段来修正视频,把视频中人物的目光进行调整。 第三个功能就是人工智能生成广告的场景,同样是只需要三个步骤:上传视频——剪辑视频精华——生成广告片,就可以完成一段广告片。 我们随机上传了一段10秒的视频来生成广告片,值得注意的是,在这个过程中,Captions同样会提示你选择自己想要的语言,支持多语种。并且在广告片生成的过程中可以自己编辑模板,选择自己更中意的风格。 体验下来,Captions在广告片生成方面可以提供的模板编辑等功能,更适合有一定广告设计基础的人士来使用。 不过,对于没有广告生成经验的用户,Captions提供一种更简单的广告生成功能,即用户提供产品链接或者描述,直接生成广告一次最多生成5个AI广告,广告视频生成长度在15秒到60秒不等。 Captions提供给客户的就是视频编辑和修正的功能,比较令人惊艳的效果在于,这些功能借助AI技术产生了比较大的突破,比如人物眼神调整,不仅要保证人物的面部表情自然,还有眼神的和面部的动作一致性等问题,对技术支持的要求并不低。 脱离Captions的功能本身,我们以工具的角度来看这款产品,先从商业化视角来说,Captions目前更侧重于内容创作者的使用,可以理解为小B端用户,因此我们也看到,Captions社区创作者招募计划吸引了300万人关注。 其实除了提供功能,Captions的共创共赢思路也是现在很多AI产品工具都在关注和借鉴使用的,比如,其推出了人工智能创造者计划。 这个计划和其AI广告功能是相呼应的,在这份计划里,申请者可以上传自己的视频,设置自身广告价格,然后静待接单。 产品功能和用户变现综合到一起之后,用户的粘性更容易得到保证,而且对于产品的影响力提升,实现传播也是借势推动的过程。 其实不光Captions,在我们国内,也有很多类似的AI产品在采用这种共创共赢的变现方式,产品和客户站在同一方向上,目标是探索出更多商业化可能。 不得不承认,Captions的视频编辑修改技术的成熟度非常高,这也就意味着这个赛道有更多可以拓展的可能。 包括Beeble这种以AI技术辅助灯光特效实现的方式,也是对AI视频的一个修正和使其变得更完美的工具。
AI功能更细分,靠降成本获资本青睐
Beeble和Captions都是围绕视频生成来进行内容调整的工具,而把视角转向用户端可以发现,其实这两款产品都在对准小B端用户或者说C端用户,去改善他们的需求,降低C端用户使用AI视频编辑工具的门槛或成本,从而在影视,广告等方向上帮助小B端或者C端用户探索更多变现可能。 Beeble 的首席执行官兼联合创始人Hoon Kim说出过他的一个愿景:希望未来,那些即使只有不到10名艺术家的小团队,也可能创作出可以媲美好莱坞的内容。 事实证明,Beeble的产品正在向着这个方向前进。 Beeble提供的技术,就是作为虚拟制作平台,把真实的演员虚拟化到虚拟世界中,再重新进行灯光和特效调整。 目前,其产品SwitchLight就是使用AI为视频生成单独的通道,例如深度、粗糙度、反照率、镜面反射和环境光遮蔽。每个通道描述光线如何与表面互动,并使用基于物理的渲染来准确复制真实世界的照明效果。 Kimi给出一个大胆补充:只需要有手机摄像头,用户就可以随意在各种位置出现,对现场背景的照明也没有要求,这样的视频,使用Beeble的虚拟功能也能处理好。 SwitchLight的功能验证了Kimi的补充,通过使用其AI虚拟制作功能,可以将演员融入各种具有逼真灯光的环境中。用户方面则不需要对AI技术有过深的了解,该功能本身是基于物理渲染或者3D软件支持,来针对用户上传的素材,处理遮罩、PBR贴图提取和重新照明。 这很容易让人想到影视拍摄中常见的绿幕,不过普通人拍摄视频不一定都具备绿幕资源,所以可以看到,在SwitchLight中,不管用户提供的是否是绿幕素材,工具都可以实现迅速去除掉素材中的背景。 SwitchLight比较突出的一项优势在于物理渲染,其功能可以很准确的模拟光线与物体的相互作用,从而实现更高程度的渲染效果,带来更逼真的视频场景。 简单一点理解,就是视频拍摄的过程更简单了,只要拍摄到人物主体,其他大部分特效和灯光效果可以通过AI后期来完成。 当然,SwitchLight的大部分功能还是围绕光照来进行特效调整,这与其创始团队最初的创业目标有关。 Beeble的五位创始人于2022年创办了这家公司,此前他们曾供职于韩国一家游戏发行商的人工智能团队,在创办公司之初,几位创始人就发现,市场上缺乏专注于“灯光”的人工智能产品,而灯光在影视拍摄和摄影中又非常重要,介于此,他们将Beeble的创办基调定在了灯光和特效的调整上。 Kimi对Beeble非常有信心,特别是在短视频,短剧等新的视频和影视形式发展起来的今天,Kimi表示,未来他们的目标客户除了C端,还将拓展类似Reelshort这类短剧平台,B端市场的空间也很值得期待。
结语
竖屏时代,视频成为主流传播形式的模式下,人人都能成为屏幕中的主角,AI视频编辑工具的市场无疑是在不断拓展的。在视频生成大模型都在对标Sora想要分一杯羹的时候,对于中小团队来说,手握技术,去细分功能方面做加强和补充,不失为一个好的赛道。本质上来说,AI视频生成也是一种生态,在这个生态里,任何功能、环节,都有可供探索的技术方向,以辅助其功能更完善。未来,这个生态的参与者势必会拓展出更多细分路径。一枝梧桐(https://www.yzwt.cn)