H-DDCM
Videoyu göndermek yerine karşıya çizdirmek. Hazır bir difüzyon/akış modelini (görüntüde SD 2.1 ve FLUX, videoda Causal-Forcing) yeniden eğitmeden codec gibi kullanan bir sıkıştırma yöntemi. Alıcı tarafındaki model kareyi kendisi yeniden üretiyor; gönderici yalnızca hangi gürültü desenlerinin seçileceğini iletiyor. Dev Gauss kod kitabı yerine hızlı Walsh–Hadamard dönüşümüyle anında üretilen desenler kullanılıyor. Uzun videolarda son yeniden kurulan kareler KV-cache'e geri besleniyor; bunun için ek bit gönderilmiyor. Not: belirtilen repo yalnızca proje web sayfası, içinde yöntemin kodu yok.
Görüntü/video sıkıştırma ve üretken modellerle ilgilenen araştırmacılar ve meraklı mühendisler.
Nasıl kullanılır?
5 adımNormal bir video codec'i görüntünün kendisini sıkıştırıp gönderir. H-DDCM ise farklı bir yol izler: alıcıdaki hazır bir üretken model (görüntüde SD 2.1 ve FLUX, videoda Causal-Forcing) kareyi kendisi yeniden üretir.
Gönderici yalnızca 'hangi gürültü desenleri seçilecek' bilgisini iletir; model bu desenlerden yola çıkarak kareyi kurar. Model yeniden eğitilmez.
Desenler dev bir tablodan aranmaz; hızlı Walsh-Hadamard dönüşümü denen bir matematik işlemiyle anında üretilir. Yöntemi pratik yapan hız kazancı buradan gelir.
Uzun videolarda son kurulan kareler modelin kısa süreli hafızasına (KV-cache) geri beslenir; bunun için ek veri gönderilmez, böylece video akışı tutarlı kalır.
Kod henüz yayımlanmadı; h-ddcm.github.io sayfasında örnek karşılaştırmalar var. Denemek isteyen, kodu açık olan benzer yöntem Turbo-DDCM ile başlayabilir.
Bu proje tarayıcıda denenmiyor; kurulum gerekiyor. Yukarıdaki adımlar tam da bunun için.