GAIA-1 is a generative AI model for autonomous driving

Özet

Otonom sürüş için AI modelleri, yol kurallarının hem içinde hem de dışında sayısız trafik durumunu videolardan öğrenmek zorundadır. Ancak eğitim materyali bir darboğazdır.

Sentetik veriler, gerçek dünya trafiğinde henüz büyük filolara sahip olmayanlar da dahil olmak üzere tüm üreticiler için bu darboğazı hafifletmeye yardımcı olabilir. 2017’de kurulan ve otonom sürüş modelleri için derin öğrenme tekniklerinde uzmanlaşmış bir İngiliz şirketi olan Wayve’nin GAIA-1 üretken AI modelinin yapmak için tasarlandığı görev tam olarak budur. GAIA, “Özerklik için Üretken Yapay Zeka” anlamına gelir.

Karayolu trafiği için çok modlu bir “dünya modeli”

GAIA-1, video, metin ve araç girişleri dahil olmak üzere çok modlu bir sürüş verileri topluluğu üzerinde eğitilmiştir. Dil modellerinin bir dizideki bir sonraki olası karakterleri tahmin etmeyi nasıl öğrendiğine benzer şekilde, GAIA-1 bir video sekansındaki sonraki kareleri tahmin etmeyi öğrendi.

Ancak Wayve’e göre GAIA-1 “standart bir üretken video modeli” değil. Daha ziyade, farklı araçlar ve özellikleri, yollar, binalar veya trafik ışıkları gibi “sürüşle ilgili önemli kavramları anlamayı ve çözmeyi öğrenen” bir “gerçek dünya modeli”dir.

GAIA-1’in gerçek harikası, içinde yaşadığımız dünyanın temelini oluşturan üretken kuralları ortaya koyma becerisinde yatmaktadır. Modelimiz, çok çeşitli sürüş verileriyle ilgili kapsamlı eğitim yoluyla, gerçek dünyanın doğal yapısını ve kalıplarını sentezleyerek, son derece gerçekçi ve çeşitli sürüş sahneleri oluşturmasını sağlar.

yol

Bu dik tezin kanıtı olarak Wayve, GAIA-1’in birkaç saniyelik video girişinden “uzun makul gelecekler” oluşturma becerisinden alıntı yapıyor. Yapay zeka geleceğe ne kadar uzak bakarsa, kısa girdi o kadar önemsiz hale geldi. Daha sonra oluşturulan sahneler, kaynak malzemeden hiçbir içerik içermiyordu.

Wayve, “Bu, GAIA-1’in yaşadığımız dünyanın temelini oluşturan kuralları anladığını gösteriyor” diye yazıyor. Simüle edilmiş sürüş davranışı, park edilmiş ve hareket eden arabaların ortamı gibi gerçekçidir.

Model, hem hareket eden araç hem de çevre için birçok ayar sağlayacak şekilde tasarlanmıştır. Örneğin, eğitim verilerinde yer almayan sürüş durumlarını simüle edebilir. Bu, örneğin, otonom sürüş için AI modellerini değerlendirmek için kullanılabilecek tehlikeli sürüş durumlarını simüle etmek için faydalı olacaktır. GAIA-1 araştırma üzerine kuruludur Şehir İçi Sürüş İçin Model Tabanlı Taklit Öğrenme.

Metinden Trafiğe

GAIA-1’e, aşağıdaki videoda birden çok otobüs arasında gezinmek gibi belirli sahneler oluşturması için doğal dilde talimat verilebilir.

Halihazırda bir sahne çalışıyor olsa bile, metin girerek sahneyi değiştirebilirsiniz. Aşağıdaki videoda, “Gece oldu ve farlarımızı yaktık” istemi, oluşturulan bir gece sürüşüne yol açar.