1. 首页>>分享

Runway 宣布 AI 摄像头控件上线,实现 3D 化并为艺术、媒体和娱乐提供便利

日前,Runway宣布推出更灵活、更真实的AI摄像头控制,开始实现3D!此功能适用于 Gen-3 Alpha Turbo 视频生成模型。

图片

就在一周前,即 10 月 23 日,Runway 还宣布了 Gen-3 Alpha 的一项新功能 Act-One。该功能可以将视频中真人的面部表情准确再现为AI角色。

图片

虽然功能很小,但它们将为动画师、游戏开发者和电影制作者提供极大的便利并节省巨大的成本。

当各大公司竞相提高AI视频生成的长度、保真度和流畅度时,Runway已经在AI视频赛道上明确地刻画出自己的特色——制作专门服务于艺术、媒体和娱乐的AI。

正如 Runway 的首席执行官在他的博客中写道:

“许多人犯的错误是将人工智能视为最终目标。它不是。人工智能是一种机制,是支持更大事物的基础设施。真正的革命不在于技术本身,而在于它所带来的影响:新的表达形式、讲述故事的新方式、连接人类体验的新方式。”

“这就是纯人工智能公司变得过时的原因。令人着迷的问题不再是技术本身,而是我们用它构建的东西。下一波创新浪潮不会来自专注于构建更好模型的公司。”

“变革的浪潮将来自那些了解如何使用这些工具来创造新媒体形式、新类型体验和新故事讲述方式的人。基础设施已经铺设,基础已经奠定。现在是令人兴奋的部分:用它来创造一些有意义的东西。”

AI相机控制

虽然其他 AI 视频生成器和 Runway 本身之前已经提供了摄像机控制,但它们相对粗糙,而且它们生成的新视频通常看起来是随机的和本地化的 - 当尝试向上、向下或围绕某个主题平移时,有时会导致该主题扭曲并变成二维。尺寸,否则可能会发生奇怪的变形和故障。

不过,现在借助 Runway 新发布的 AI 摄像机控制,用户可以选择场景中移动的方向、角度和速度,并结合各种摄像机移动方式和速度变化。

图片

图片

水平移动时移动相机角度以在拍摄对象周围形成弧线。

图片

图片

快速穿越各个地方,

图片

慢慢地穿过场景,

图片

快速缩小。

图片

第一幕

在影视制作中,为了将现场表演转换成适合动画的3D模型,传统的面部动画流程通常包括多个复杂的步骤,涉及动作捕捉、手动面部绑定等技术,还需要大量参考视频素材。

图片

拍摄过程中,演员们穿着专用装备,脸上布满了标记点

而且,传统方法仍然面临着一个很大的挑战——如何将参考视频中的情绪和微表情完全复制到数字角色中。

现在,有了第一幕,视频就可以了。

图片

即使是普通手机拍摄的视频,也能赋予AI生成的角色生动、逼真的表情。眼神、微表情、节奏、表演都在最终的输出中得到了准确的还原。

第一幕支持多种角色类型。一个视频可以生成多个风格不同的角色。

列出的案例中,还有动物动画角色,感觉可以直接上演《疯狂动物城》!

图片

现供职于《Runway》的杨集美发布了《X》第一幕中经典场景的重现版,重现了《指环王》中咕噜的“没人喜欢你”台词。

图片

在不同的视角下,第一幕生成的角色视频仍然高度稳定,保持高保真的面部动画。不会因视角、光线等因素的变化而造成画质波动或失真。

第一幕还可以创建多轮对话场景。毫不夸张地说,只要有相机,一个人就能演一部戏!

单人录音流程

成品视频

参考:

本文采摘于网络,不代表本站立场,转载联系作者并注明出处:http://mjgaz.cn/fenxiang/270850.html

联系我们

在线咨询:点击这里给我发消息

微信号:13588888888

工作日:9:30-18:30,节假日休息