PixVerse R2 实时世界模型

PixVerse R2 是一个支持持续视听生成与交互的实时世界模型,让您进入不断运行的世界,用移动、提示词、音频与参考内容引导它,并在下一刻展开时继续探索

世界持续向前运行

试用 PixVerse R2
01

向前探索

通过移动控制引导角色前往的方向。在世界探索体验中,WASD 输入可塑造前进运动,镜头方向则帮助构图您遇到的内容

02

改变当下

要求天气变化、召唤载具、改变角色的移动方式,或重新定义周围场景。提示词可以进入当前体验,而非将其重置

03

延续变化的结果

世界中的变化可以持续影响接下来的内容。观察上下文变化,然后继续在由这项变化塑造的世界中行动

04

持续运行的体验

无需等待完整视频生成完毕再做反应。进入已经在生成的世界,在下一刻出现时引导它

一个运行中的世界,多种进入方式

不同输入以不同速度运行,并携带不同意图。R2 将这些信号带入共享且持续的生成循环

PixVerse R2 实时输入演示
01

动作控制

在世界持续生成时,移动控制可为导航与连续探索提供即时反馈

02

提示词

提示词可改变正在进行的主体、场景、动作或交互,无需重新开始

03

音频输入

音频将时机、语义内容和同步关系带入当前的视听世界

04

多模态参考

视觉参考可与移动、文本和音频控制一起,为同一个持续运行的体验提供方向

始终保持动态的世界

R2 围绕连续性、实时控制、视听一致性以及可持续扩展的底层模型路径构建

PixVerse R2 连续世界演示
01

连续世界演进

当前状态、最新输入和近期历史可共同影响下一段视听内容。世界无需暂停来开始完全新的生成

02

一个循环内的多模态控制

文本、参考内容、音频和 WASD 等动作可在生成期间进入,并更新下一个世界状态

03

适应不同速度的响应式控制

动态分块生成可根据活跃信号调整片段长度:较短片段用于即时局部响应,较长片段用于连贯事件与运动

04

同步的视听输出

视频与音频被设计为同一运行状态中相连的部分,让时机与表达持续协同

记忆

持久的世界锚点

角色身份、环境、风格和世界规则等持久锚点会在体验持续期间保持相关

近期运动与局部状态

近期运动、姿态、镜头行为和环境变化将局部动态带入下一次过渡

对象级相关性

对象级历史表征可以被复用与压缩,使仍然重要的细节继续向前传递

先扩展世界,再让它实时运行

R2 将两个关联过程汇入一条模型路径:扩展世界模型的能力,再将该能力带入可响应的运行范围

全模态因果自回归

R2 的因果世界建模主干学习历史世界状态、当前实时控制与下一段同步音视频之间的关系

实时加速

加速将因果基础带入可响应的运行范围,同时保持控制响应、长上下文状态、视觉真实感与结构

面向实时预算的结构化注意力

结构化注意力将计算聚焦于在实时预算内最相关的世界状态依赖与控制信号

由粗到细的生成

低分辨率阶段先建立布局、主体运动和镜头结构,高分辨率阶段再恢复纹理、边缘与局部细节

不同速度下的信号

不同速度下的信号
信号 响应 生成路径
移动 即时局部反馈 短而可响应的生成片段
提示词或参考内容 更广泛的事件或世界变化 可引导下一序列的状态更新
音频 时机、语义内容与同步 相连的视听延续

为可进入并持续改变的世界而设计

R2 的核心是一项简单却重要的变化:移动和指令可以在生成世界发生的同时持续影响它

世界构建与探索

进入一个视听世界,在其中移动,并用提示词改变地形、场景元素、角色或移动方式。探索、响应并继续前行

可响应角色

语音、表情、移动和交互可在持续体验中协同工作,为实时角色互动创造空间

PixVerse R2 常见问题

快速了解持续运行的世界、实时控制与 R2 体验

什么是 PixVerse R2?
PixVerse R2 是用于持续视听生成与交互的实时全模态世界模型。它将文本、参考内容、音频与动作带入同一个运行中的世界,使实时输入可在体验持续时影响接下来发生的内容
PixVerse R2 与标准 AI 视频生成器有何不同?
标准文生视频或图生视频工作流通常会根据初始请求生成一段完整视频。R2 则围绕持续演进的世界设计,可在生成过程中接收新的输入
我可以控制 PixVerse R2 中的移动吗?
在 R2 世界探索体验中,您可以使用 WASD 控制移动。镜头方向可辅助视角,而生成会响应当前路径和世界状态
提示词可以改变已经运行的世界吗?
可以。提示词可影响主体、环境、动作、移动风格或局部交互。它旨在进入当前世界并影响后续内容,而不是开始一次独立生成
PixVerse R2 可以使用哪些输入?
R2 支持统一的多模态界面,可包含提示词、多模态参考、音频和 WASD 等连续动作控制。当前公开体验主要聚焦移动与提示词交互
PixVerse R2 会同时生成音频和视频吗?
R2 被设计为实时视听世界模型。它运行中的世界可将同步视频和音频作为同一体验中相连的部分生成
PixVerse R2 会保留世界变化的相关性吗?
R2 旨在在持续体验中保留相关状态。它的记忆结构将持久锚点、近期历史和对象级相关性分开,使变化能够继续影响之后的内容
PixVerse R2 是完整的游戏引擎吗?
不是。R2 并未定位为完整游戏引擎或完全开放世界。它展示了可以响应移动和提示词的模型生成世界
我在哪里可以体验 PixVerse R2?
您可以在 world.pixverse.video 体验 PixVerse R2。可用性、排队和最终体验配置可能会因访问管理而变化

安全认证

ISO/IEC 27001 认证标志

ISO/IEC 27001 信息安全管理认证

PixVerse 维持经 DNV 认证、符合 ISO/IEC 27001 的信息安全管理体系,为在运营中保护信息提供结构化方法

下一步,您想改变什么?

进入仍在生成的世界。在它运行时改变场景,看看下一个动作会带您前往何处