Khám phá về phía trước
Dùng điều khiển chuyển động để dẫn hướng nhân vật. Trong trải nghiệm khám phá thế giới, đầu vào WASD có thể định hình chuyển động về phía trước, còn hướng máy quay giúp khung hình hóa những gì bạn bắt gặp.
PixVerse R2 Mô hình thế giới thời gian thực
PixVerse R2 là mô hình thế giới thời gian thực cho việc tạo và tương tác nghe nhìn liên tục. Hãy bước vào một thế giới đang chuyển động, điều hướng nó bằng chuyển động, prompt, âm thanh và dữ liệu tham chiếu, rồi tiếp tục khám phá khi khoảnh khắc tiếp theo mở ra.
Thế giới tiếp tục chuyển động
Trải nghiệm PixVerse R2Thay đổi hiện tại
Yêu cầu thay đổi thời tiết, gọi một phương tiện, đổi cách nhân vật chuyển động hoặc xác định lại cảnh xung quanh bạn. Một prompt có thể đi vào trải nghiệm hiện tại mà không cần đặt lại nó.
Tiếp tục cùng hệ quả
Những thay đổi trong thế giới có thể vẫn liên quan đến điều diễn ra tiếp theo. Hãy quan sát sự thay đổi bối cảnh, rồi tiếp tục hành động trong thế giới mà thay đổi đó góp phần tạo nên.
Một trải nghiệm đang diễn ra
Thay vì chờ một video hoàn chỉnh rồi mới phản hồi, hãy bước vào thế giới đang được tạo và điều hướng khoảnh khắc tiếp theo khi nó xuất hiện.
Một thế giới đang vận hành, nhiều cách để bước vào
Các đầu vào khác nhau hoạt động ở tốc độ khác nhau và mang những kiểu ý định khác nhau. R2 đưa các tín hiệu này vào một vòng lặp tạo chung, liên tục.
Những thế giới luôn chuyển động
R2 được xây dựng xoay quanh tính liên tục, điều khiển trực tiếp, sự nhất quán nghe nhìn và một hướng mô hình nền tảng có thể tiếp tục mở rộng.
Bộ nhớ
Mỏ neo thế giới bền vững
Những mỏ neo bền vững như danh tính nhân vật, môi trường, phong cách và quy tắc thế giới vẫn liên quan khi trải nghiệm tiếp diễn.
Chuyển động gần đây và trạng thái cục bộ
Chuyển động gần đây, tư thế, hành vi máy quay và thay đổi môi trường mang động lực cục bộ vào lần chuyển tiếp tiếp theo.
Mức độ liên quan theo đối tượng
Biểu diễn lịch sử ở cấp đối tượng có thể được tái sử dụng và nén để các chi tiết vẫn quan trọng có đường đi tiếp.
Mở rộng thế giới, rồi đưa vào thời gian thực
R2 đưa hai quy trình liên kết vào một hướng mô hình: mở rộng năng lực của mô hình thế giới, rồi đưa năng lực đó vào phạm vi vận hành có phản hồi.
AR nhân quả omni
Nền tảng mô hình hóa thế giới nhân quả của R2 học mối quan hệ giữa trạng thái thế giới trong lịch sử, điều khiển trực tiếp hiện tại và đoạn âm thanh-video đồng bộ tiếp theo.
Tăng tốc thời gian thực
Tăng tốc đưa nền tảng nhân quả vào phạm vi vận hành có phản hồi trong khi vẫn giữ phản hồi điều khiển, trạng thái ngữ cảnh dài, tính chân thực thị giác và cấu trúc.
Chú ý có cấu trúc cho ngân sách thời gian thực
Cơ chế chú ý có cấu trúc tập trung tính toán vào các phụ thuộc liên quan nhất với trạng thái thế giới hoạt động và tín hiệu điều khiển trong ngân sách thời gian thực.
Tạo từ thô đến chi tiết
Các giai đoạn độ phân giải thấp thiết lập bố cục, chuyển động chủ thể và cấu trúc máy quay, còn giai đoạn độ phân giải cao khôi phục kết cấu, cạnh và chi tiết cục bộ.
Tín hiệu ở nhiều tốc độ
| Tín hiệu | Phản hồi | Hướng tạo |
|---|---|---|
| Chuyển động | Phản hồi cục bộ tức thời | Các đoạn tạo ngắn, có phản hồi |
| Prompt hoặc dữ liệu tham chiếu | Một sự kiện hoặc thay đổi thế giới rộng hơn | Cập nhật trạng thái có thể dẫn hướng chuỗi tiếp theo |
| Âm thanh | Nhịp độ, nội dung ngữ nghĩa và đồng bộ | Tiếp nối nghe nhìn kết nối |
Được thiết kế cho những thế giới bạn có thể bước vào và tiếp tục thay đổi
R2 tập trung vào một thay đổi đơn giản nhưng có hệ quả: chuyển động và chỉ dẫn có thể tiếp tục ảnh hưởng đến một thế giới được tạo trong khi nó đang diễn ra.
Xây dựng và khám phá thế giới
Bước vào một thế giới nghe nhìn, di chuyển trong đó và dùng prompt để thay đổi địa hình, thành phần cảnh, nhân vật hoặc cách di chuyển. Khám phá, phản hồi và tiếp tục.
Nhân vật phản hồi
Giọng nói, biểu cảm, chuyển động và tương tác có thể hoạt động cùng nhau trong một trải nghiệm liên tục, tạo không gian cho tương tác nhân vật theo thời gian thực.
Tìm hiểu thêm về PixVerse R2 và video AI
Khám phá nghiên cứu PixVerse, kiến trúc mô hình thế giới thời gian thực, trò chơi tương tác và hướng dẫn thực tiễn về video AI.
Câu hỏi thường gặp về PixVerse R2
Câu trả lời nhanh về thế giới đang vận hành, điều khiển trực tiếp và trải nghiệm R2.
PixVerse R2 là gì?
PixVerse R2 là mô hình thế giới omni thời gian thực cho việc tạo và tương tác nghe nhìn liên tục. Nó đưa văn bản, dữ liệu tham chiếu, âm thanh và hành động vào một thế giới đang vận hành, để đầu vào trực tiếp có thể ảnh hưởng đến điều diễn ra tiếp theo khi trải nghiệm tiếp tục.
PixVerse R2 khác với trình tạo video AI tiêu chuẩn như thế nào?
Quy trình văn bản sang video hoặc hình ảnh sang video tiêu chuẩn thường tạo một video hoàn chỉnh từ yêu cầu ban đầu. R2 được thiết kế xoay quanh một thế giới liên tục tiến hóa có thể nhận đầu vào mới trong lúc tạo.
Tôi có thể điều khiển chuyển động trong PixVerse R2 không?
Trong trải nghiệm khám phá thế giới R2, bạn có thể dùng điều khiển WASD để dẫn hướng chuyển động. Hướng máy quay có thể hỗ trợ góc nhìn trong khi việc tạo phản hồi theo đường đi và trạng thái thế giới hiện tại.
Một prompt có thể thay đổi thế giới đang vận hành không?
Có. Prompt có thể tác động đến chủ thể, môi trường, hành động, phong cách chuyển động hoặc tương tác cục bộ. Chỉ dẫn này đi vào thế giới hiện tại và ảnh hưởng đến điều tiếp theo, thay vì bắt đầu một lần tạo riêng.
PixVerse R2 có thể dùng những loại đầu vào nào?
R2 hỗ trợ giao diện đa phương thức hợp nhất, có thể gồm prompt văn bản, dữ liệu tham chiếu đa phương thức, âm thanh và hành động như WASD hoặc các điều khiển liên tục khác. Trải nghiệm công khai hiện tại tập trung vào tương tác dựa trên chuyển động và prompt.
PixVerse R2 tạo âm thanh và video cùng lúc không?
R2 được thiết kế là mô hình thế giới nghe nhìn thời gian thực. Thế giới đang vận hành của nó có thể tạo video và âm thanh đồng bộ như các phần kết nối của cùng trải nghiệm.
PixVerse R2 có giữ các thay đổi của thế giới liên quan không?
R2 được thiết kế để giữ trạng thái liên quan trong một trải nghiệm liên tục. Cấu trúc bộ nhớ tách mỏ neo bền vững, lịch sử gần đây và mức độ liên quan cấp đối tượng, để các thay đổi có thể tiếp tục ảnh hưởng đến điều sau đó.
PixVerse R2 có phải một game engine hoàn chỉnh không?
Không. R2 không được định vị là một game engine hoàn chỉnh hoặc thế giới mở đầy đủ. Nó minh họa các thế giới do mô hình tạo có thể phản hồi chuyển động và prompt.
Tôi có thể trải nghiệm PixVerse R2 ở đâu?
Trải nghiệm PixVerse R2 tại world.pixverse.video. Tình trạng sẵn sàng, hàng đợi và cấu hình cuối cùng của trải nghiệm có thể thay đổi theo cách quản lý quyền truy cập.
Chứng nhận bảo mật
Quản lý an toàn thông tin được chứng nhận ISO/IEC 27001
PixVerse duy trì hệ thống quản lý an toàn thông tin được DNV chứng nhận theo ISO/IEC 27001, hỗ trợ phương pháp có cấu trúc để bảo vệ thông tin trong toàn bộ hoạt động.
Bạn sẽ thay đổi điều gì tiếp theo?
Bước vào một thế giới vẫn đang được tạo. Thay đổi cảnh khi nó đang vận hành. Xem hành động tiếp theo đưa bạn đến đâu.