Snapchat araştırmacıları, akıllı telefonlardaki AI görüntüleri için yeni bir yöntem geliştirdi. Bu, kullanıcıların aksi takdirde gerekli olacak donanımı ortadan kaldırmasına ve daha fazla gizliliğin keyfini çıkarmasına olanak sağlamalıdır.
Midjourney 5.1, Stable Diffusion XL ve Adobe Firefly gibi görüntü yapay zekasının son sürümleri, oluşturulan grafiklerin kalitesini yeni bir düzeye yükseltti. Bununla birlikte, bu modellerin inkar edilemez dezavantajları da vardır: çok büyüktürler ve karmaşık ağ mimarilerine sahiptirler, bu da onları hesaplama açısından yoğun ve yavaş hale getirir.
Bu modelleri geniş ölçekte çalıştırmak, üst düzey GPU’lar ve pahalı olan ve gizlilik endişelerini artıran bulut tabanlı çıkarım gerektirir. Snapchat’in ana şirketi Snap Inc ve Northeastern Üniversitesi’ndeki araştırmacılar şimdi SnapFusion’u gösteriyor. Bu modelin, difüzyon modellerini bir akıllı telefonda iki saniyeden daha kısa sürede çalıştıran ilk model olduğu söyleniyor.
Yonga üreticisi Qualcomm, Şubat ayında bir akıllı telefonda 15 saniyeden daha kısa sürede AI görüntüleri oluşturabileceğini göstermiş olsa da, SnapFusion en azından iPhone 14 Pro’da çok daha hızlı çalışıyor.
reklam
Stable Difusion v1.5 ile eşdeğer görüntüler
Ekibe göre SnapFusion, daha verimli bir ağ mimarisi ve daha az çıkarım adımı sunarak kısa sürede bir metin isteminden 512’ye 512 piksellik bir görüntü üreterek Stable Diffusion v1.5 kalitesine yaklaşabiliyor. Bunu yapmak için SnapFusion yalnızca sekiz gürültü giderme adımı gerektirirken, Qualcomm’un yöntemi 20 adım gerektirir.
Araştırmacıların hazırladığı bir demo video, Apple’ın bugüne kadarki en güçlü akıllı telefonu olan iPhone 14 Pro’da SnapFusion’u çalışırken gösteriyor. Qualcomm’un yöntemi daha önce yalnızca en yeni üst düzey yongası Snapdragon 8 Gen 2 ile mümkündü.
Görüntü yapay zekalarını demokratikleştirme
Araştırmacılar, proje üzerinde çalışma motivasyonlarını açıklayarak, “Çalışmamız, kullanıcıların ellerine güçlü metinden görüntüye difüzyon modelleri getirerek içerik oluşturmayı demokratikleştiriyor” diyor. Ancak SnapFusion mükemmel olmaktan uzaktır.
Araştırmacılara göre, model hala nispeten çok sayıda parametreye sahip. Ayrıca yakın gelecekte teknolojinin daha geniş bir kitleye ulaşması için sadece iPhone 14 Pro’dan daha fazla akıllı telefonda çalışması için çalışmalar yapılması gerekecek.
Snapchat zaten üretici yapay zeka konusunda deneyime sahip, ancak kişisel sohbet robotu My AI ile metin alanında daha fazla deneyime sahip.
Öneri
