OpenAI ile Prompt to Production: Beş Önemli Çıkarım
PixVerse ve OpenAI oturumlarından beş çıkarımı keşfedin: PixVerse eklentisini kurma, storyboard hazırlama ve tekrar kullanılabilir beceriler oluşturma.
PixVerse ve OpenAI, 28 ve 29 Ekim’de biri Asya-Pasifik, diğeri Kuzey Amerika için olmak üzere iki canlı Prompt to Production oturumu düzenledi. Oturumlara dünyanın dört bir yanından yüzlerce kişi katıldı. PixVerse’ün ABD pazarlama çalışmalarını yöneten Paul Hsu her iki oturumu da sundu. OpenAI’ın uygulamalı AI mühendisliği ekibinden Tyler Ryu, PixVerse Creator Partner Programme kapsamındaki içerik üreticileriyle birlikte iki oturuma da katıldı: Endonezya’dan Aldo ve Hidayat ile ABD’den Serge Donaldson. Konuşmacıların tümü ChatGPT, Codex ve PixVerse eklentisini kullanarak yaratıcı bir briften tamamlanmış bir videoya nasıl ulaştıklarını gösterdi.
Bu oturumlar, PixVerse’ün OpenAI ile geliştirdiği mevcut ürün entegrasyonlarının devamı niteliğindeydi. ChatGPT ve Codex’te yerleşik olarak kullanılabilen PixVerse eklentisi, video, görsel ve ses için uçtan uca bir iş akışı sunuyor. Eklentiye yakın zamanda PixVerse’ün AI video projeleri için çalışma alanı olan Canvas desteği de eklendi. PixVerse CLI ise Codex’i video, görsel ve ses oluşturma olanaklarını bir araya getiren bir AI içerik stüdyosuna dönüştürüyor. Her ikisi de bugün kullanılabiliyor; PixVerse YouTube kanalındaki devam eden Prompt to Production video serisi de bu çalışmayı web seminerlerinin ötesine taşıyor.
ChatGPT ve Codex’te PixVerse eklentisi nasıl kurulur?
OpenAI’da uygulama mühendisi olan Tyler Ryu, Prompt to Production web seminerinde ChatGPT ve Codex’te PixVerse eklentisinin nasıl bulunup kurulacağını gösteriyor.
Tyler kurulum sürecini beş adımda anlattı.
- Uygulamayı bilgisayarınıza yükleyin. Bilgisayarınızdaki dosyalara erişebilmesi için Codex uygulamasını veya ChatGPT’nin ajan modunun yerel sürümünü kullanın. Uygulamanın bilgisayarınızda mı yoksa bulutta mı çalıştığını anlamak için sohbetin üst kısmına bakın: Bulut simgesi, bilgisayarınızdaki dosyalara erişemeyen bulut sürümünde olduğunuzu gösterir.
- Eklentiler bölümünde “PixVerse” araması yapın. Oturumlarda iki kayıt görünüyordu. Eskisi “legacy” etiketi taşıyordu ve kullanımdan kaldırılması planlanıyordu; bu yüzden yeni olanı seçin.
- PixVerse hesabınızda oturum açın. Yükleme sırasında oturum açmanız istenir. Böylece Ajan, PixVerse hesabınızla doğrudan ve kimliği doğrulanmış bir bağlantı kurar.
- Adıyla çağırın. @PixVerse yazın ve ne istediğinizi günlük dille anlatın. Tyler’ın demosunda, bacakları olan kutu biçiminde koşan bir teslimat robotu istendi ve tamamlanmış video yaklaşık iki dakikada hazırdı.
- İstem yazma işini birlikte gelen becerilere bırakın. Eklenti, PixVerse geliştiricilerinin hazırladığı ve PixVerse modelleri için nasıl istem yazılacağını kodlayan beceriler içeriyor. Tyler’ın örneğinde, bir pankeki çevirmek için verilen kısa bir istek, pankekin yalnızca pişmiş hâle dönüşmesine yol açabiliyor. Beceriyle yazılan istem ise spatula hareketini adım adım tarif ederek pankekin gerçekten çevrilmesini sağlıyor.
Eklenti kayıtları ve menüler hızla değişiyor. Bu nedenle uygulamada gördükleriniz, konuşmacıların 28 ve 29 Ekim’de gösterdiklerinden biraz farklı olabilir.
Çıkarım 1: Codex’te animasyon referansı olarak PixVerse videosu kullanın
Tyler oyun geliştiriyor ve AI ile canlandırılan karakterlerin bazen tuhaf hareket ettiğini görüyor. Çözümü, Codex’ten karakterin referans görsellerini istemek, bunları PixVerse’e vererek karakterin yürüdüğü bir video oluşturmak ve ardından Codex’e bu hareketi oyun karakterine aktarmasını söylemek oldu.
Sonrasında sonucu günlük dille iyileştirdi; örneğin önden görünüşte dizin bükülü kaldığını belirtti. Kendi tahminine göre tüm süreç yaklaşık 20 dakika sürdü. Aynı iş elle animasyonla iki ila üç saat alabilir veya çok daha yüksek maliyetli bir hareket yakalama stüdyosu gerektirebilirdi.
Videonun başka araçlar için referans hâline geldiği ikinci bir kullanım da gösterdi. Bir PixVerse teslimat robotu videosu Blender’da yeniden oluşturulan 3D modele, ardından tıklayarak dolaştığınızda robotun canlandığı küçük, oynanabilir bir oyun demosuna dönüştü. Tyler’a göre AI sizi yolun büyük bölümünde ileri taşıyor; bir video modeli de başka türlü elde edilmesi zor olan son hareket ayrıntılarını sağlayabiliyor.
Eğitimin tamamını YouTube’da izleyin: OpenAI anlatıyor: Codex’te PixVerse eklentisiyle oyun oluşturma.
Çıkarım 2: ChatGPT ve Codex’te tutarlı karakterler için referansları sade tutun
Tutarlılık her iki oturumun soru-cevap bölümünde de tekrar tekrar gündeme geldi ve konuşmacılar bazı ipuçları paylaştı.
Hidayat’a göre referansların çok ayrıntılı olması gerekmiyor. Bir karakterin önden, arkadan ve yandan üç görünüşü ile yüzünün bir yakın planı yeterli. Aynı yaklaşım nesneler, araçlar, binalar ve ortamlar için de geçerli. Ardından Codex’e herhangi bir şey oluşturmadan önce yerel referans klasörünü kontrol etmesini söylüyor.
Serge’ün karakter ve mekân referanslarını içeren Canvas panosu.
Serge birkaç ek öneride bulundu. Mekân referanslarında karakter bulundurmayın; aksi hâlde model onları kareye yerleştirmeye çalışır. Geniş plan bir referansta küçük bir yüz varsa modeli yüzün yakın plan referansına yönlendirmek için bu yüzü opak bir daireyle kapatın. Kostüm ve aksesuarlar için ayrı referans sayfaları hazırlayın: Elinde bıçak tutması gereken bir karakter, aksesuar şansa bırakılırsa telefon tutarken görünebilir. Klipler arasında en güçlü sürekliliği sağlamak için önceki videoyu uzatın; bunun daha fazla Kredi tükettiğini unutmayın. Tyler da Codex’in sahne düzenini hatırlaması için tüm referansları tek bir proje klasöründe tutmayı önerdi.
Çıkarım 3: PixVerse Kredilerini harcamadan önce ChatGPT’de storyboard hazırlayın
Aldo’nun örneği, gürültü önleyici kulaklık taktığı için arkasındaki T-Rex’i hiç fark etmeyen bir yolcu hakkında kısa ve komik bir reklamdı. Önce referans görsellerini, sonra storyboard’u hazırladı; videoyu ancak bundan sonra oluşturdu. Kendi rakamlarına göre storyboard yaklaşık 30 Kredi (0,20 USD), 30 saniyelik video ise yaklaşık 1.000 Kredi (yaklaşık 6,60 USD) tutuyor. Ofis ortamı doğru gelmediğinde, sahneyi storyboard aşamasında yaklaşık 30 Kredi harcayarak tren istasyonuna taşıdı. Finali beğenmediğinde ise yalnızca son 10 saniyeyi yaklaşık 350 Krediye (2,50 USD’den az) yeniden oluşturdu; bu, 30 saniyelik videonun tamamını yeniden yapma maliyetinin yaklaşık üçte biri.
Çok ayrıntılı istemlerin karakteri katılaştırdığını, istemi kısaltmanın da bunu düzelttiğini gördü. Diğer alışkanlığı 480p’de deneme yapıp daha sonra kalite iyileştirmesi uygulamak. Bu rakamlar Aldo’nun kendi projesine ait; sizin maliyetleriniz farklı olabilir.
Taslaklar ve fikir geliştirme düşük çözünürlükte yapılabilir; ardından PixVerse mini uygulaması AI Upscale kullanılarak son klip yayın için daha yüksek çözünürlüğe çıkarılabilir.
Çıkarım 4: Video oluşturmadan önce çekimi ChatGPT’de 3D olarak planlayın
Serge, gerçek ve hayalî mekânlarda geçen animasyon dizileri üzerinde çalışıyor. Sorunu, video modellerinin mekân düzenine uymamasıydı. Çözüm olarak ChatGPT’ye iskele veya eğik bir deniz fenerinin bulunduğu koy gibi bir mekânın referans görsellerini veriyor ve basit bir three.js modeli oluşturmasını istiyor. Kamerayı hareket ettirip istediği çekimi çerçeveliyor ve o kareyi kaydediyor. Sonra kareyi karakter referanslarıyla PixVerse Canvas’ta birleştirip PixVerse’ten o kompozisyona istenen görünümü uygulamasını istiyor.
Mekânın basit bir 3D modeli, Serge’ün önce kamerayı yerleştirip her çekimi çerçevelemesini sağlıyor.
3D modelin ayrıntılı olması gerekmiyor; görevi yalnızca çerçeveleme ve kompozisyonu belirlemek. Tyler, bu tür ön görselleştirmenin eskiden oyun motorları kullanan büyük stüdyolara özgü olduğunu, artık ise ev bütçesiyle yapılabildiğini belirtti. Serge de sonucun, istem yazmaktan çok yönetmenlik yapmaya benzediğini söyledi.
Serge’ün ekranında, PixVerse Canvas’ta kaydedilen kare ile bunun sonucunda oluşturulan görsel yan yana görülüyor.
Çıkarım 5: Becerileri bir kez yazın, her iş için ayrı ChatGPT veya Codex projesi tutun
Aldo işini bir stüdyo gibi yürütüyor. Çalışma alanında becerileri, bilgi dosyaları ve projeleri bulunuyor; her projenin kendi klasörü ve sohbeti var. Böylece alınan her karar konuşmada kalıyor. Beceri, istem yazma, hikâye, küçük resim veya altyazı gibi tek bir iş için hazırlanmış bir oyun planı. Bir kez yazılıp tekrar kullanılıyor; bir şey bozulduğunda Aldo çözümü beceriye ekleyerek onu her projede geliştiriyor. Küçük resim becerisi yazı tiplerini, renkleri ve düzeni zaten bildiği için bunları yeniden açıklaması gerekmiyor.
Aldo’nun Codex’in her seferinde başvurmasını sağladığı becerilerin özeti.
Serge de Codex’te benzer şekilde çalışıyor. Her çalışma bütünü için bir proje oluşturuyor ve bağlamı korumak üzere ilgili sohbetleri bu projede tutuyor. Ayrıca Ajana bir dosyanın ne olduğunu açıklayıp dosya adını ve klasörü onun seçmesine izin veriyor.
Katılımcılardan ilginç sorular
Katılımcılar çeşitli pratik sorular sordu. Bunlardan biri iki oturumda da gündeme geldi: ChatGPT ile Codex arasındaki fark ne? Codex geliştiricilere yönelik bir araç olarak başladı; ChatGPT’nin ajan modu da aynı altyapıda, ancak teknik arayüz olmadan çalışıyor. Her ikisi de PixVerse eklentisini çalıştırıyor.
PixVerse ile ilgili soruların birkaçı, iki ürünün aynı hesabı nasıl kullandığına odaklandı. Eklenti PixVerse hesabınıza bağlandığından, ister doğrudan PixVerse’te ister ChatGPT üzerinden oluşturun, oluşturma sınırları PixVerse planınıza bağlı. ChatGPT üzerinden oluşturduğunuz her şey PixVerse’te de görünür. Ancak daha önce PixVerse web sitesinde oluşturduğunuz videolar ChatGPT’de görünmez.
PixVerse’ün düğüm tabanlı proje çalışma alanı olan Canvas da sorulara konu oldu. Paul, bir düğümdeki referans görselin sonraki videoyu nasıl beslediğini ve ayrı kliplerin kısa bir filmde nasıl birleştirilebildiğini gösterdi.
PixVerse Canvas aracının adım adım tanıtımı.
Başlayın
Aldo’nun yeni başlayanlara önerisi, işe başlamak, ilk denemenin kusurlu olacağını beklemek ve yinelemeye devam etmekti.
Serge, yaratıcılığın fare tıklamalarında mı yoksa insanı araçları öğrenmeye yönelten fikirde mi olduğunu sordu. Ona göre yaratıcılık fikirde. Ajanların, aklındaki fikirleri daha fazla dışa vurmasını sağladığını söyledi.
Her iki içerik üreticisi de bir fikirle yola çıktı; araçlar bu fikri ekrana taşımalarına yardımcı oldu. ChatGPT veya Codex ile PixVerse’ü birleştirmek, yineleme sürecini hızlandırıyor. Oturumlarda gösterilen işlerin çoğu da bu şekilde tamamlandı.
OpenAI ile Prompt to Production serisini YouTube’da izleyin
Oturumların özeti, OpenAI ile Prompt to Production oynatma listesinin parçası olarak PixVerse YouTube kanalında kısa eğitim videolarına dönüştürüldü.