SAM 2

Ne işe yarar?

SAM 2 (Segment Anything Model 2), Meta tarafından geliştirilen ve görsel ile videolarda nesne bölütleme (segmentasyon) yapabilen bir temel modeldir. Görselleri tek karelik bir video gibi ele alarak akışkan bellek mimarisiyle gerçek zamanlı video işlemeyi mümkün kılar. Kullanıcının işaret ettiği nesneleri kareler boyunca kaybetmeden hassas biçimde izleyip maskeler. PyTorch derleme desteği sayesinde video üzerinde yüksek çıkarım hızlarına ulaşabilir.

Neler için kullanılabilir?

• Video akışlarında seçilen nesneleri kareler boyunca gerçek zamanlı takip edip maskelemek
• Görsellerdeki belirli objeleri tek bir tıklamayla arka plandan hassasça ayırmak
• Görsel düzenleme ve video kurgu süreçlerinde otomatik maske ve katman oluşturmak

Nasıl kullanılır?

1. GitHub deposunu klonlayarak gerekli Python ve PyTorch bağımlılıklarını kurun.
2. Meta tarafından sağlanan SAM 2 veya SAM 2.1 model ağırlıklarını indirin.
3. SAM2VideoPredictor veya görsel tahmin fonksiyonlarını kullanarak nesne noktalarını belirleyip maskeler üretin.

Adımlar deponun README'sinden özetlendi; güncel kurulum için deponun kendi sayfasına bakın.

Kimler için?

Bilgisayarlı görü, video analizi ve görsel düzenleme alanında çalışan yazılımcılar ve araştırmacılar.

Aynı kategoriden

• ComfyUI (138K) Düğüm tabanlı arayüzüyle görsel ve video üreten modüler yapay zekâ motoru.
• MoneyPrinterTurbo Belirtilen konudan otomatik olarak senaryolu, sesli ve altyazılı kısa video üretir.
• OpenCut Web, masaüstü ve mobilde çalışan açık kaynaklı bir video düzenleme uygulamasıdır.
• OpenMontage Yapay zekâ kodlama asistanlarını tam teşekküllü bir video üretim stüdyosuna dönüştürür.
• photocraft Rust ile yazılmış, Photoshop benzeri açık kaynaklı katmanlı görsel düzenleyicidir.
• remotion React ve programlama dilleriyle kod üzerinden otomatik video oluşturma kütüphanesidir.