stability.ai , 2D görüntüleri tek tıklamayla 3D videolara dönüştüren yeni bir model yayınladı

stability.ai , 2D görüntüleri tek tıklamayla 3D videolara dönüştüren yeni bir model yayınladı, 2 boyutlu görüntüleri 3 boyutlu video çıktısına dönüştüren ve lens kontrolüne olanak tanıyan Stable Virtual Camera modelini yayınladı.

Önemli Noktalar

• Çoklu görünüm difüzyon modelinin uygulanmasıyla, 2 boyutlu görüntülerin gerçekçi derinlik ve perspektife sahip 3 boyutlu videolara dönüştürülmesi, karmaşık yeniden yapılandırma veya sahne optimizasyonu olmadan gerçekleştirilebilir.
• Giriş görüntülerinin maksimum sayısı 32’dir ve oluşturulan 3B video kullanıcı tanımlı lens yörüngesini takip eder. Ayrıca 360°, sekiz rakamı, spiral, itme-çekme yakınlaştırma, döndürme vb. dahil olmak üzere seçilebilecek 14 başka dinamik yol vardır.
• Stable Virtual Camera ticari olmayan bir lisans altında araştırma amaçlı kullanıma açıktır. Ağırlıklar şu anda Hugging Face’ten indirilebilir durumda ve kodlar GitHub’da mevcut.

Link: https://github.com/Stability-AI/stable-virtual-camera/

🎥 “Fotoğrafçılar işlerini mi kaybedecek? Bu yapay zeka fotoğrafları 3 boyutlu gişe rekorları kıran filmlere dönüştürebiliyor: Natürmort fotoğraflar çekin ve saniyeler içinde Hollywood seviyesinde kamera hareketleri yaratın!”

Herkese merhaba, ben İstiridye Soslu Karnabahar. Hiç karşılaştınız mı?

• 👉 Ürün natürmort resimleri çekildikten sonra hareket etmiyor ve tanıtım videoları için ayrılan bütçe harcanamıyor
• 👉 Tasarım taslağına dönen bir ekran eklemek istiyorum fakat üç ay C4D öğrenmeme rağmen hala render aşamasında takılıyorum.
• 👉 Eski fotoğrafları canlandırıp dinamik görsellere dönüştürmek ve AE anahtar karelerini zamanın sonuna göre ayarlamak istiyorum…

Stability AI Lab’ın bugünkü Stable Virtual Camera’sı 3D yaratımı yeniden tanımlıyor! Bu yapay zeka modelinin büyüsü şudur:

• ✅ İçeri beslenen fotoğraflar = film seviyesinde kamera hareketleri dışarı atılır : 360° dönüş/spiral yörünge/itme-çekme zum vb. dahil 17 profesyonel kamera hareketini destekler.
• ✅ 3D tutarlılık siyah teknolojisi : Oluşturulan videoda herhangi bir kusur veya titreme yoktur ve gerçek çekimler kadar pürüzsüzdür
• ✅Sıfır eşik işlemi : Modelleme bilgisi gerekmez, resmi yükleyin ve parçayı seçin = dikey/yatay ekranı doğrudan bir filme aktarın

Bir e-ticaret ekibi bunu kullanarak bir saat içinde 500 ürün teşhir videosu oluşturdu ve bir müze antik kitaplardan alınan illüstrasyonları kullanarak sürükleyici animasyonlar yaptı – grafik materyallerinizi canlandırma zamanı geldi!

🚀 Hızlı Okuma

Stable Virtual Camera, Stability AI tarafından piyasaya sürülen ve 2 boyutlu görüntüleri 3 boyutlu videolara dönüştürebilen bir yapay zeka modelidir.

1. Temel özellikler : Özel kamera izleri, kusursuz video geçişleri, çoklu çıktı biçimleri ve uzun video üretimi desteği.
2. Teknik prensip : 3B tutarlılığı ve zamansal düzgünlüğü sağlamak için üretken yapay zeka ve sinirsel işleme teknolojisine dayanmaktadır.

Stabil Sanal Kamera Nedir?

Stable Virtual Camera, Stability AI tarafından piyasaya sürülen ve 2 boyutlu görüntüleri gerçekçi derinlik ve perspektife sahip 3 boyutlu videolara dönüştürebilen bir yapay zeka modelidir. Kullanıcılar, kamera yörüngelerini ve spiral, itme-çekme yakınlaştırma, kaydırma vb. gibi çeşitli dinamik yolları belirleyerek videolar üretebilirler. Model, 1 ila 32 giriş görüntüsünden, maksimum 1000 kareye kadar uzunlukta, farklı en boy oranlarında (örneğin 1:1, 9:16, 16:9) videoların oluşturulmasını destekler.

Kararlı Sanal Kamera, karmaşık yeniden yapılandırma veya optimizasyona gerek kalmadan, 3B tutarlılığını ve zamansal düzgünlüğü koruyarak yüksek kaliteli 3B video üretir. Bu da ona reklamcılık, içerik oluşturma ve eğitim gibi alanlarda geniş bir potansiyel uygulama alanı sağlıyor.

Stable Virtual Camera’nın Temel Özellikleri

• 2D Görüntüyü 3D Videoya : Tek veya birden fazla 2D görüntüyü derinlik ve perspektif efektleriyle 3D videoya dönüştürün.
• Özelleştirilmiş kamera yolları : Kullanıcılar 360° dönüş, ∞ şeklinde yörünge, spiral yol, çeviri, dönüş, yakınlaştırma vb. dahil olmak üzere çeşitli dinamik kamera yolları tanımlayabilir.
• Kusursuz yörünge videosu : Oluşturulan videoda farklı perspektifler arasında doğal bir geçiş vardır ve kusursuz döngü elde edilebilir.
• Esnek çıktı biçimleri : Kare (1:1), dikey (9:16), yatay (16:9) ve diğer özel en boy oranlarında video oluşturmayı destekler.
• Sıfır çekim üretimi : Eğitim sırasında sadece kare görüntüler kullanılarak farklı görüntü oranlarında videolar üretilmesi.
• Derinlik ve perspektif : Oluşturulan videolarda gerçekçi derinlik ve perspektif efektleri yer alır, gerçek bir kameranın hareketini simüle eder.
• 3B Tutarlılık : Dinamik kamera yolları üzerinde 3B tutarlılığını ve zamansal düzgünlüğü koruyun, titreme veya eserleri önleyin.
• Uzun videoları destekler : Uzun süreli görüntüleme gerektiren sahneler için uygun, 1000 kareye kadar uzunlukta videolar üretebilir.

Sabit Sanal Kameranın Teknik Prensipleri

• Üretken Yapay Zeka Tabanlı Görüntü Dönüşümü : Kararlı Sanal Kamera, derin öğrenme modeli aracılığıyla giriş 2D görüntülerini analiz etmek ve işlemek için üretken Yapay Zeka teknolojisini kullanır. Model, görüntüdeki sahne yapısını, nesne konumunu ve doku bilgilerini anlayabilir ve bunlara dayanarak yeni perspektifler üretebilir.
• Nöral render teknolojisi : Model, nöral render teknolojisine dayanmaktadır ve gerçek bir kameranın hareket yolunu simüle ederek derinlik ve perspektif efektlerine sahip 3 boyutlu videolar üretir. Yüksek kaliteli çoklu görünüm videoları oluşturmak için 360° dönüş, spiral yol, itme-çekme yakınlaştırma vb. gibi birden fazla dinamik kamera yolunu destekler.
• Çoklu görünüm tutarlılığı optimizasyonu : Stable Virtual Camera, videolar oluştururken farklı perspektifler arasında tutarlılık ve yumuşak geçişler sağlamak için optimizasyon algoritmaları kullanır. Karmaşık kamera yollarında 3 boyutlu sahnelerin kararlılığını ve tutarlılığını koruyabilir.
• Difüzyon modeline dayalı üretim süreci : Kararlı Sanal Kamera’nın üretim süreci, görüntünün gürültüsünü ve ayrıntılarını kademeli olarak optimize eden ve son olarak yüksek kaliteli 3D video üreten difüzyon modeline benzer.

Stable Virtual Camera nasıl çalıştırılır

1. Bağımlılıkları yükleyin

Öncelikle sanal ortamı kurun ve gerekli tüm bağımlılıkları yükleyin:

pip install -e .

Demoları kullanmanız veya bu depodan geliştirme yapmanız gerekiyorsa INSTALL.mdEk bağımlılıkları yükleme bölümüne bakın.

• KURULUM.md : github.com/Stability-A…

2. Gradio Demo’yu Kullanma

Gradio demosu genel kullanıcılara uygun grafiksel bir kullanıcı arayüzüdür. Başlamak için aşağıdaki komutu çalıştırın:

python demo_gr.py

Detaylı kullanım kılavuzuna bakınız GR_USAGE.md.

• GR_USAGE.md : github.com/Stability-A…

3. CLI Demo’yu Kullanma

CLI demosu, kullanıcının komut satırı üzerinden daha fazla seçenek geçirmesine olanak tanır ve ileri düzey kullanıcılar ve akademik araştırmacılar için uygundur. Aşağıda bazı örnek komutlar verilmiştir:

python demo.py --data_path <data_path> [additional arguments]

Detaylı kullanım kılavuzuna bakınız CLI_USAGE.md.

• CLI_USAGE.md : github.com/Stability-A…

kaynak

• Proje ana sayfası : stable-virtual-camera.github.io/
• GitHub deposu : github.com/Stability-A…
• HuggingFace Model Kütüphanesi : hugface.co/stabilityai…

❤️ Siz de yapay zekanın gelişimiyle ilgileniyor ve yapay zeka uygulama geliştirmeye meraklıysanız, her gün büyük modeller ve yapay zeka alanında açık kaynaklı projeleri ve uygulamaları paylaşacağım, çalışan örnekler ve pratik eğitimler vereceğim ve yapay zeka teknolojisine hızlı bir şekilde başlamanıza yardımcı olacağım!

[Saitama] Sıcak hatırlatma:

1. Bu sitede yayınlanan makaleler ve ekler çalışma ve araştırma ile sınırlı olup, ticari veya yasadışı amaçlarla kullanılamaz veya sonuçlarından lütfen kullanıcı sorumlu olsun!

2. Kaynaklar ağdan alınmıştır, kaynakların bütünlüğünü garanti etmez, yalnızca öğrenme ve araştırma içindir, herhangi bir ihlal varsa, silmek için lütfen müşteri hizmetleriyle iletişime geçin！

3. Bizi beğendiyseniz, VIP satın almaya hoş geldiniz, daha iyi hizmet alacaksınız!

İletişim İletişim

Şikayetler Tavsiyeler VIP Satın Alın Vip Özel

© Lütfen yeniden baskılar için yazarla iletişime geçin, özel yeniden baskılar telif hakkı ihlali olarak kabul edilir!