StyleDrop, herhangi bir görüntünün stilini öğrenir ve üretken bir yapay zeka modelinin onu yeniden oluşturmasına yardımcı olur. Google’ın yöntemi, Dreambooth, LoRA veya Textual Inversion gibi diğerlerinden daha iyi performans gösterir.
Google’ın yeni yöntemi, Muse metin-resim modelini kullanarak görüntülerin belirli bir tarzda sentezlenmesini sağlar. StyleDrop, renk şemaları, gölgeleme, tasarım desenleri ve yerel ve küresel efektler dahil olmak üzere özel bir stilin inceliklerini yakalar. Google’a göre, girdi olarak gereken tek şey tek bir resim.
StyleDrop, az sayıda eğitilebilir ağ parametresinde ince ayar yaparak yeni stili öğrenir ve ardından insan veya otomatik geri bildirimle yinelemeli eğitim yoluyla modelin kalitesini artırır.
StyleDrop hızlı ve birkaç örnekle öğrenir
StyleDrop özellikle giriş görüntüsü üzerinde eğitilir ve bu görüntüyü yeniden oluşturmak için bir dizi görüntü oluşturur. Bunlardan en yüksek kaliteli görüntüler ya bir CLIP skoru ya da insan geri bildirimi ile seçilir ve ileri eğitim için kullanılır. İçeriği değil, orijinal görüntünün stilini yeniden üreten bir görüntü yüksek kaliteli olarak kabul edilir.
reklam
Ekip, insan geri bildirimi olsa bile tüm sürecin üç dakikadan az sürdüğünü söyledi. Bunun nedeni, StyleDrop’un yinelemeli eğitim için bir düzineden daha az görüntüye ihtiyaç duyması, dediler.
Ekibe göre StyleDrop, Dreambooth, LoRA’lar ve Imagen’de Textual Inversion ve Stable Diffusion dahil olmak üzere metinden görüntüye modellerden stil aktarımı için diğer yöntemlerden daha iyi performans gösteriyor.
Stil için StyleDrop, nesneler için Dreambooth
Ekip, “StyleDrop’un çok çeşitli stillerde doku, gölgeleme ve yapı nüanslarını önceki yaklaşımlardan önemli ölçüde daha iyi yakalayabildiğini ve stil üzerinde daha önce mümkün olandan çok daha fazla kontrol sağladığını görüyoruz” dedi.
Ekip ayrıca bir görüntü olarak farklı stillerde yeni bir nesne öğrenmek ve oluşturmak için StyleDrop ile Dreambooth’u birleştiriyor ve Muse ile yöntemleri kullanarak özel bir stilde özel bir nesne oluşturabiliyor.
Google, StyleDrop’u çok yönlü bir araç olarak görüyor; bir kullanım durumu, tasarımcıların veya şirketlerin marka varlıklarıyla eğitim almalarına ve yeni fikirleri kendi tarzlarına göre hızla prototiplemelerine olanak tanıyor. Daha fazla bilgi şu adreste mevcuttur: Stil Bırak proje sayfası.
Öneri
