06 Haziran 2023 Güncellemesi:
Pist Gen-2 artık mevcut tarayıcıda ve iOS için akıllı telefon uygulaması. Aşağıdaki fragman yeni özelliklerden bazılarını gösteriyor.
20 Mart 2023 tarihli orijinal makale:
New York merkezli web video düzenleme girişimi Runway, yeni bir metinden videoya modeli olan Gen-2’yi tanıtıyor.
reklam
Runway, mevcut videolara yalnızca metin istemlerini kullanarak yeni bir görünüm kazandırabilen Gen-1 modelini ilk olarak Şubat ayında tanıttı. Örneğin, gerçekçi bir şekilde filme alınmış bir sahneyi, orijinal sahnenin orantılarını ve hareketlerini koruyan bir çizgi film dünyasına dönüştürür.
Bu, insanlar ve ortamlar için ve yüksek bir soyutlama düzeyinde çalışır: örneğin, Gen-1, yan yana dik duran birkaç not defterini yalnızca metin komutlarını kullanarak bir ufuk çizgisine dönüştürebilir. Tüm Gen-1 özellikleri, Runway’in yeni Gen-2 modeline dahildir.
Runway, metinden videoya modeli başlattı
Ancak Gen-2, bunu bir adım öteye taşıyor: tek bir metin isteminden tamamen yeni video sahneleri oluşturma. Aşağıdaki üç saniyelik video sahnesi, Runway tarafından “Bir dağ silsilesinin havadan insansız hava aracı görüntüleri” istemiyle oluşturuldu. Ses henüz dahil edilmedi, ancak Runway’e göre araştırılıyor.
Video: Pist
Komut istemi: “Bir gözün yakından görünümü.” | Video: Pist
Öneri
Ayrıca, Runway bir görüntüden veya bir görüntü ve metin açıklamasının birleşiminden kısa video dizileri oluşturabilir. Ekran görüntüsünün solunda giriş görüntüsünü görebilirsiniz. Kısa bir video animasyonuna dönüştürülür (sağda, ekran görüntüsünde büyütülmüş). Arka plan sahnesi ve kamera açısı, metin istemine göre değişir.
Bloomberg, bir gösteriden sonra, video üretimi “dakikalar içinde” gerçekleşir. Ancak ortaya çıkan videolar yalnızca saniyeler uzunluğunda ve biraz dalgalı. Özellikle hareket dizileri, model için hala bir zorluktur. Bununla birlikte, oluşturulan sahneler istemin içeriğini karşılar.
Discord bekleme listesi üzerinden dağıtım
Runway, Gen-2’yi bir programa kaydolan seçili test kullanıcılarının kullanımına sunuyor. Discord üzerinden bekleme listesi. Devreye alma devam ediyor. Runway’e göre Gen-1’in şu anda “binlerce kullanıcısı” var. Başlangıç, yapay zeka mekanizmalarını insan moderatörlerin yardımıyla birleştirerek video sisteminin şiddet içeren içerik gibi olası kötüye kullanımını önlemeyi amaçlıyor.
Gen-2-Fragman. | Video: Pist
Google, Runway’e ek olarak bir HD metinden videoya yapay zeka sistemi üzerinde çalışıyor ve Meta, metni kısa videolara da dönüştüren Make-a-Video’yu gösterdi. Google’ın özellikle metinden videoya düzenleme için Dreamix adlı başka bir modeli var. AI görüntü oluşturmadaki hızlı ilerlemeler videoya dönüşürse, stok video veritabanları yakında iş modellerini yeniden düşünmek zorunda kalabilir.