智东西网11月7日报道 据VentureBeat报道,11月1日,美国明星AI视频生成初创公司Runway为其Gen-3 Alpha Turbo机型推出了全新的AI摄像头控制功能。该功能可以让用户在根据文字提示、上传的图像或现有视频生成新视频时,进行更精细的AI摄像头控制、动态视角调整和创意镜头移动,打造更真实、生动的3D效果。
此外,据 VentureBeat 报道,Runway 还积极开发一种可以模拟物理世界的 AI 系统,称为“世界模型”。该系统的目标是创建一个能够表示和模拟各种现实世界情况和交互的通用模型。
1.打造电影级3D视觉:精细控制、动态视角、创意镜头
Runway先进的AI相机控制为用户提供了更精细的相机控制功能,让用户可以轻松放大和缩小场景和主题,同时保持AI生成的角色的形状和背后背景的真实感,就好像他们真的一样那里。在真实的电影拍摄地点。
例如,用户可以放大和缩小场景和主题,甚至保留人工智能生成的人物形态和背景,真正将他们和观众带入一个完全实现的、看似3D的世界,就像在现实生活中一样电影布景或地点。
除了精细的摄像机控制外,Runway的新功能还使用户能够动态调整视角以水平移动、围绕拍摄对象平滑地形成弧线,或者从不同角度探索场景,大大提高了视频的沉浸感和视角多样性。性别。
例如,创作者可以使用水平移动围绕主题形成平滑的弧线,或从不同的有利位置探索位置,从而增强沉浸感和视角。此外,各种摄像机运动可以与速度变化相结合,以创建更具视觉吸引力的循环或过渡。
新功能还允许用户使用创意镜头,包括戏剧性的放大操作来深入研究电影般的场景;或者进行快速缩小,引入新的背景,转移故事的焦点,给观众带来新的视角体验。
例如,用户可以执行戏剧性的放大以更深入地了解电影风格的场景,或执行快速缩小以引入新的背景、转移叙事焦点并为观众提供新的视角。还增加了缓慢移动相机的功能,使相机能够平稳地滑过场景,非常适合强调细节或营造张力。
从Runway的视频来看,这些新功能以更快、更经济、更无缝的方式实现高质量的电影场景。
2、以预测未来为愿景,开发人工智能“世界模型”
Runway不仅致力于提供强大的视频生成工具,还专注于开发可以模拟物理世界的“世界模型”。此类人工智能系统的目标是构建环境的内部表示并用它来预测未来事件。
据 VentureBeat 报道,当被问及 Runway 是否开发了 3D AI 场景生成模型时,Runway CEO Cristóbal Valenzuela 回答说:“世界模型。”这一回答暗示了Runway对开发“世界模式”持开放态度,并可能在该领域进行研发。
Runway 联合创始人兼首席技术官 Anastasis Germanidis 在 12 月的一篇文章中表示,世界模型是一种人工智能系统,能够构建环境的内部表示,并用它来预测该环境中的未来事件。迄今为止,对世界模型的研究主要集中在非常有限和受控的环境上,例如视频游戏中的虚拟世界或自动驾驶汽车的模拟环境。
Germanidis还表示,Runway的目标是创建一个通用的世界模型,可以表示和模拟各种现实世界的情况和交互。 Runway 在构建此类模型并将其应用于现实场景方面进展顺利,最近推出的新摄像机控制就证明了这一点。
结语:突破AI人脸识别壁垒,打造3D影视效果,Runway持续创新
Runway首席执行官Cristóbal Valenzuela曾表示,AI是这个时代的相机。上个月,Runway推出了一项名为Act-One的新功能,突破了AI面部识别的障碍,让用户可以轻松创建高质量的动画表情捕捉视频。本月,Runway推出了先进的AI摄像头控制功能,让用户可以轻松创建具有影院级3D视觉效果的视频内容。
AI视频生成市场竞争激烈,几乎每周都会发布新型号。在这条赛道上,Runway面临着Adobe的Firefly、OpenAI的Sora、Meta的Movie Gen和谷歌的Veo等强大竞争对手的挑战。但Runway作为早期的领导者,并没有在技术能力上妥协。
本文采摘于网络,不代表本站立场,转载联系作者并注明出处:http://mjgaz.cn/fenxiang/270884.html