PixVerse R2 Modèle de monde en temps réel

PixVerse R2 est un modèle de monde en temps réel pour la génération et l’interaction audiovisuelles continues. Entrez dans un monde en mouvement, guidez-le par le mouvement, les prompts, l’audio et les références, puis poursuivez votre exploration à mesure que le moment suivant se déploie.

Le monde continue de bouger

Essayer PixVerse R2
01

Explorer vers l’avant

Utilisez les commandes de mouvement pour guider le personnage. Dans les expériences d’exploration de monde, les touches WASD peuvent façonner le déplacement vers l’avant tandis que la caméra cadre ce que vous découvrez.

02

Changer le présent

Demandez un changement de météo, faites apparaître un véhicule, modifiez le mouvement d’un personnage ou redéfinissez la scène. Un prompt peut rejoindre l’expérience en cours sans la réinitialiser.

03

Poursuivre avec les conséquences

Les changements apportés au monde peuvent rester pertinents pour la suite. Observez un changement de contexte, puis continuez à agir dans le monde qu’il a contribué à créer.

04

Une expérience en cours

Au lieu d’attendre une vidéo terminée avant de réagir, entrez dans un monde déjà en génération et guidez le moment suivant à mesure qu’il émerge.

Un monde en cours, plus de façons d’y entrer

Les différentes entrées fonctionnent à des vitesses distinctes et portent des intentions différentes. R2 rassemble ces signaux dans une boucle de génération partagée et continue.

Démonstration des entrées en direct de PixVerse R2
01

Commandes d’action

Les commandes de mouvement donnent un retour immédiat pour naviguer et explorer en continu pendant que le monde continue de se générer.

02

Prompts texte

Les prompts peuvent modifier un sujet, un décor, une action ou une interaction déjà en cours sans repartir de zéro.

03

Entrée audio

L’audio apporte le rythme, le contenu sémantique et la synchronisation au monde audiovisuel en cours.

04

Référence multimodale

Les références visuelles donnent une direction aux côtés des commandes de mouvement, de texte et d’audio dans la même expérience en cours.

Des mondes qui restent en mouvement

R2 est conçu autour de la continuité, du contrôle en direct, de la cohérence audiovisuelle et d’une voie de modèle sous-jacente qui peut continuer à s’étendre.

Démonstration d’un monde continu PixVerse R2
01

Évolution continue du monde

L’état actuel, la dernière entrée et l’historique récent peuvent informer le segment audiovisuel suivant. Le monde n’a pas besoin de s’arrêter pour lancer une génération entièrement nouvelle.

02

Contrôle multimodal dans une seule boucle

Le texte, les références, l’audio et des actions comme WASD peuvent arriver pendant la génération et mettre à jour le prochain état du monde.

03

Contrôle réactif à différentes vitesses

La génération dynamique par segments peut adapter la longueur du segment au signal actif : segments courts pour une réponse locale immédiate et plus longs pour des événements et mouvements cohérents.

04

Sortie audiovisuelle synchronisée

La vidéo et l’audio sont conçus comme des parties liées d’un même état en cours, afin que le rythme et l’expression se poursuivent ensemble.

Mémoire

Ancrages persistants du monde

Des ancrages persistants tels que l’identité du personnage, l’environnement, le style et les règles du monde restent pertinents au fil de l’expérience.

Mouvement récent et état local

Le mouvement récent, la pose, le comportement de caméra et les changements environnementaux transmettent la dynamique locale à la transition suivante.

Pertinence au niveau des objets

Les représentations historiques au niveau des objets peuvent être réutilisées et compressées afin que les détails qui comptent encore puissent se poursuivre.

Étendez le monde, puis rendez-le temps réel

R2 réunit deux processus liés sur une seule voie de modèle : étendre les capacités du modèle de monde, puis les amener dans une plage de fonctionnement réactive.

AR causal omni

L’ossature de modélisation causale de R2 apprend la relation entre l’état historique du monde, le contrôle direct actuel et le segment audio-vidéo synchronisé suivant.

Accélération en temps réel

L’accélération amène la fondation causale dans une plage de fonctionnement réactive tout en préservant la réponse au contrôle, l’état à long contexte, le réalisme visuel et la structure.

Attention structurée pour un budget temps réel

L’attention structurée concentre le calcul sur les dépendances les plus pertinentes pour l’état actif du monde et les signaux de contrôle dans un budget temps réel.

Génération du grossier au détail

Les étapes basse résolution établissent la composition, le mouvement du sujet et la structure de caméra, tandis qu’une étape haute résolution restaure texture, contours et détails locaux.

Des signaux à différentes vitesses

Des signaux à différentes vitesses
Signal Réponse Voie de génération
Mouvement Retour local immédiat Segments de génération courts et réactifs
Prompt ou référence Événement ou changement de monde plus large Mises à jour d’état guidant la prochaine séquence
Audio Rythme, contenu sémantique et synchronisation Continuation audiovisuelle connectée

Conçu pour des mondes où vous pouvez entrer et continuer à changer

R2 repose sur un changement simple mais conséquent : le mouvement et les instructions peuvent continuer d’influencer un monde généré pendant qu’il se déroule.

Création et exploration de monde

Entrez dans un monde audiovisuel, déplacez-vous et utilisez des prompts pour modifier le terrain, les éléments de scène, les personnages ou les manières de vous déplacer. Explorez, répondez et poursuivez.

Personnages réactifs

La voix, l’expression, le mouvement et l’interaction peuvent fonctionner ensemble dans une expérience continue et ouvrir la voie à l’interaction de personnages en temps réel.

FAQ PixVerse R2

Réponses rapides sur le monde en cours, les contrôles en direct et l’expérience R2.

Qu’est-ce que PixVerse R2 ?
PixVerse R2 est un modèle de monde omni en temps réel pour la génération et l’interaction audiovisuelles continues. Il réunit texte, référence, audio et action dans un monde en cours afin que les entrées en direct influencent ce qui arrive ensuite pendant que l’expérience se poursuit.
En quoi PixVerse R2 diffère-t-il d’un générateur de vidéo IA classique ?
Un flux de texte-vers-vidéo ou d’image-vers-vidéo classique produit généralement une vidéo terminée à partir d’une demande initiale. R2 est conçu autour d’un monde en évolution continue qui peut recevoir de nouvelles entrées pendant la génération.
Puis-je contrôler les déplacements dans PixVerse R2 ?
Dans les expériences d’exploration de monde R2, vous pouvez utiliser les commandes WASD pour guider les déplacements. La direction de caméra soutient le point de vue tandis que la génération répond au parcours et à l’état actuel du monde.
Un prompt peut-il modifier un monde déjà en cours ?
Oui. Un prompt peut agir sur le sujet, l’environnement, l’action, le style de mouvement ou une interaction locale. La direction est destinée à entrer dans le monde actuel et à influencer la suite plutôt qu’à lancer une génération distincte.
Quels types d’entrée PixVerse R2 peut-il utiliser ?
R2 prend en charge une interface multimodale unifiée incluant des prompts texte, des références multimodales, de l’audio et des actions telles que WASD ou d’autres contrôles continus. L’expérience publique actuelle se concentre sur l’interaction par mouvement et prompt.
PixVerse R2 génère-t-il l’audio et la vidéo ensemble ?
R2 est conçu comme un modèle de monde audiovisuel en temps réel. Son monde en cours peut produire vidéo et audio synchronisés comme des parties connectées d’une même expérience.
PixVerse R2 garde-t-il les changements du monde pertinents ?
R2 est conçu pour conserver l’état pertinent durant une expérience continue. Sa structure de mémoire sépare les ancrages persistants, l’historique récent et la pertinence au niveau des objets afin que les changements continuent d’influencer la suite.
PixVerse R2 est-il un moteur de jeu complet ?
Non. R2 n’est pas présenté comme un moteur de jeu finalisé ni comme un monde entièrement ouvert. Il démontre des mondes générés par modèle qui peuvent répondre aux déplacements et aux prompts.
Où puis-je découvrir PixVerse R2 ?
Découvrez PixVerse R2 sur world.pixverse.video. La disponibilité, la file d’attente et la configuration finale de l’expérience peuvent varier selon la gestion des accès.

Certifications de sécurité

Marque de certification ISO/IEC 27001

Gestion de la sécurité de l’information certifiée ISO/IEC 27001

PixVerse maintient un système de gestion de la sécurité de l’information certifié par DNV selon ISO/IEC 27001, soutenant une approche structurée de la protection de l’information dans l’ensemble des opérations.

Que changerez-vous ensuite ?

Entrez dans un monde qui continue d’être généré. Changez la scène pendant qu’elle se déroule. Découvrez où vous mène l’action suivante.