IC-Light
IC-Light (Intrinsic Compositing Light), ControlNet'in yaratıcısı Lvmin Zhang tarafından geliştirilen ve fotoğraflardaki aydınlatma koşullarını olağanüstü gerçekçilikle manipüle eden ve dönüştüren bir AI aydınlatma modelidir. Özelleştirilmiş aydınlatma koşullandırması ile Stable Diffusion omurgası üzerine inşa edilen bir milyardan fazla parametreli model, herhangi bir nesne veya kişi fotoğrafını alarak fotorealistik gölgeleri, vurguları ve yüzey yansımalarını korurken ışık kaynağı yönünü, renk sıcaklığını, yoğunluğunu ve ortam aydınlatmasını tamamen değiştirebilir. IC-Light iki farklı modda çalışır: öznenin bağımsız olarak çıkarılıp yeniden aydınlatıldığı ön plan aydınlatması ve aydınlatmanın yeni bir arka plan ortamına uyacak şekilde ayarlandığı arka plan uyumlu aydınlatma. Model, speküler yansımalar, ciltte yüzey altı saçılma, metalik yüzeyler ve şeffaf malzemeler dahil fiziksel ışık davranışını anlar ve gerçek dünya optik özelliklerine saygı duyan sonuçlar üretir. IC-Light, hedef aydınlatma düzenini tanımlamak için metin açıklamaları veya referans görüntüler kabul ederek nihai görünüm üzerinde sezgisel kontrol sunar. Apache 2.0 lisansı altında tamamen açık kaynaklı olan model, özel iş akışı düğümleriyle ComfyUI'ye entegre edilmiştir. Profesyonel fotoğrafçılar, ürün fotoğrafçıları, dijital sanatçılar ve e-ticaret ekipleri IC-Light'ı mevcut fotoğraflardaki olumsuz aydınlatmayı düzeltmek, günlük çekimlerden stüdyo kalitesinde aydınlatma oluşturmak, katalog görüntüleri arasında ürün aydınlatmasını eşleştirmek ve yaratıcı projeler için dramatik sinematik aydınlatma üretmek amacıyla kullanır.
Öne Çıkan Özellikler
Yapay Zeka ile Aydınlatma Kontrolü
Mevcut görsellerdeki ışığı yapay zeka ile yeniden düzenleyerek profesyonel stüdyo kalitesinde sonuçlar üretir.
HDRI Haritası Desteği
HDRI çevre haritalarını aydınlatma referansı olarak kullanarak gerçekçi ortam ışıklandırması elde eder.
Işık Yönü ve Renk Kontrolü
Işığın geldiği yönü ve rengini hassas şekilde kontrol ederek istenen atmosferi oluşturma imkanı sağlar.
Arka Plan Uyumlu Aydınlatma
Nesne veya portre üzerindeki aydınlatmayı arka planla tutarlı hale getirerek doğal kompozisyon oluşturur.
Hakkında
IC-Light (Intrinsic Compositing Light), lllyasviel (ControlNet'in yaratıcısı) tarafından 2024 yılında geliştirilen, görsellerdeki aydınlatmayı yapay zeka ile yeniden düzenleyen devrimci bir modeldir. Model, bir nesne veya kişinin fotoğrafını alarak ışık kaynağının yönünü, yoğunluğunu, rengini ve genel aydınlatma atmosferini tamamen değiştirebilir. IC-Light, compositing ve fotoğraf düzenleme iş akışlarında aydınlatma tutarsızlıklarını çözmek için özel olarak tasarlanmış olup, geleneksel yöntemlerin çok ötesinde profesyonel düzeyde sonuçlar üretir. Bu yetenek, fotoğraf çekimi sonrasında aydınlatma değişikliği yapma imkanı sunarak yaratıcı özgürlüğü önemli ölçüde genişletir.
IC-Light'ın teknik temeli, intrinsik görüntü ayrıştırma (intrinsic image decomposition) prensipleri üzerine inşa edilmiştir. Model, bir görseli albedo (malzeme rengi), normal haritası ve gölgeleme bileşenlerine ayrıştırarak her bileşeni bağımsız olarak manipüle edebilir. Bu ayrıştırma sayesinde orijinal nesnenin materyal özelliklerini ve yüzey dokusunu korurken aydınlatmayı tamamen yeniden hesaplayabilir. İki ana çalışma modu sunar: IC-Light-FC (Foreground Conditioned) ön plan nesnesinin aydınlatmasını değiştirirken arka planı otomatik ve uyumlu biçimde oluşturur, IC-Light-FGBG (Foreground-Background) ise hem ön plan hem de arka plan verildiğinde tutarlı aydınlatma uyumluluğu sağlar.
IC-Light, aydınlatma kalitesi ve gerçekçilik açısından dikkat çekici sonuçlar üretir. Farklı ışık yönleri (üst, alt, yan, arka aydınlatma), farklı ışık renkleri (sıcak, soğuk, renkli jeller), yumuşak ve sert ışık geçişleri ve çoklu ışık kaynağı simülasyonu gibi çeşitli senaryolarda tutarlı ve fiziksel olarak makul sonuçlar elde eder. Özellikle portre fotoğrafçılığında yüz aydınlatmasının dramatik biçimde yeniden düzenlenmesi, ürün fotoğrafçılığında stüdyo ışığı simülasyonu ve kompozit görsellerde farklı kaynaklardan gelen öğelerin aydınlatma uyumlulaştırması konularında üstün ve etkileyici performans gösterir. Gıda fotoğrafçılığında iştah açıcı aydınlatma düzenlemeleri ve mücevher fotoğrafçılığında parlaklık vurgulama gibi niş uygulamalarda da etkileyici sonuçlar üretir.
Kullanım alanları profesyonel görsel üretimden e-ticarete ve içerik üretimine kadar geniş bir yelpazeyi kapsar. Fotoğrafçılar stüdyo dışı çekimlere profesyonel aydınlatma efektleri eklemek, ürün fotoğrafçıları fiziksel kurulum gerektirmeden farklı aydınlatma senaryolarını sanal olarak denemek, grafik tasarımcılar compositing projelerinde aydınlatma tutarlılığı sağlamak, oyun geliştiricileri karakter ve nesne aydınlatmasını sahne entegrasyonu için ayarlamak için IC-Light kullanır. Film post-prodüksiyonunda sahne aydınlatmasının düzeltilmesi ve sosyal medya içerik üretiminde dramatik ve atmosferik ışık efektleri oluşturma gibi alanlarda da yaygın biçimde değerlendirilir.
IC-Light, Apache 2.0 lisansı altında tamamen açık kaynaklı olarak GitHub'da yayınlanmıştır. ComfyUI için özel düğümler (nodes) mevcuttur ve bu entegrasyon sayesinde karmaşık aydınlatma düzenleme iş akışları görsel olarak node tabanlı arayüzde oluşturulabilir. Hugging Face Spaces üzerinde etkileşimli demo sayfası bulunur ve kurulum gerektirmeden anında deneme yapılabilir. Model, Stable Diffusion altyapısı üzerine inşa edildiğinden, 8 GB VRAM'e sahip tüketici GPU'larında çalışabilir. Gradio tabanlı yerel arayüz de sağlanmakta olup bulut bağımlılığı olmadan bağımsız kullanım mümkündür.
Aydınlatma manipülasyonu alanında IC-Light, AI tabanlı relighting'in pratik kullanılabilirlik eşiğini aşan ilk açık kaynak model olarak öne çıkar. Geleneksel relighting yöntemlerinin 3D sahne bilgisi, derinlik haritaları veya çoklu görüntü yakalama gerektirmesine karşın IC-Light, tek bir 2D görüntüden çalışabilmesi nedeniyle erişilebilirlik ve iş akışı sadeleştirmesi açısından devrimci bir adım temsil eder. ControlNet'in yaratıcısının bu projesi, kontrol edilebilir görsel üretim alanındaki derin uzmanlığını aydınlatma manipülasyonuna başarıyla taşımış ve profesyonel fotoğrafçılık ile AI arasındaki köprüyü güçlendirmiştir.
Kullanım Senaryoları
Ürün Fotoğrafçılığı
E-ticaret ürün görsellerini profesyonel stüdyo aydınlatmasıyla yeniden düzenleyerek satış artırma.
Portre Düzenleme
Portre fotoğraflarında aydınlatmayı değiştirerek dramatik veya doğal ışık efektleri oluşturma.
Sahne Kompozisyonu
Farklı kaynaklardan gelen görselleri tutarlı aydınlatmayla birleştirerek doğal sahneler oluşturma.
Konsept Sanat Aydınlatması
Konsept sanat çalışmalarında farklı aydınlatma senaryolarını hızla test ederek atmosfer belirleme.
Artılar ve Eksiler
Artılar
- Görsellerdeki aydınlatmayı yapay zeka ile yeniden düzenleme yeteneği
- Ön plan ve arka plan aydınlatmasını bağımsız kontrol edebiliyor
- Ürün fotoğrafçılığında stüdyo benzeri sonuçlar elde etme imkanı
- ComfyUI ve diğer diffusion araçlarıyla entegre çalışıyor
Eksiler
- Karmaşık sahnelerde aydınlatma artefaktları oluşabiliyor
- Yalnızca aydınlatma değişikliği — genel görsel düzenleme yapamıyor
- GPU gereksinimleri yüksek — gerçek zamanlı işleme sınırlı
- Bazı malzeme türlerinde ışık yansımaları doğal görünmeyebiliyor
Teknik Detaylar
Parametre
1B+
Mimari
Stable Diffusion + Lighting Conditioning
Eğitim Verisi
Synthetic lighting pairs
Lisans
Apache 2.0
Özellikler
- Relighting
- HDR lighting
- Direction control
- Color control
- Background üretimi
- Portrait relighting
- ComfyUI destek
Benchmark Sonuçları
| Metrik | Değer | Karşılaştırma | Kaynak |
|---|---|---|---|
| Aydınlatma Doğruluğu (User Study) | %87 tercih oranı | DiffusionLight: %62 | IC-Light Paper (arXiv:2405.00126) |
| SSIM (Relighting) | 0.89 | Total Relighting: 0.83 | Papers With Code |
| İşleme Süresi (512×512) | ~5 saniye (A100) | — | GitHub Repository |
Mevcut Platformlar
Sıkça Sorulan Sorular
İlgili Modeller
ControlNet
ControlNet, kenar haritaları, derinlik haritaları, insan poz iskeletleri, segmentasyon maskeleri ve normal haritalar gibi çeşitli koşullandırma girdileri aracılığıyla görsel üretim sırasında hassas yapısal rehberlik sağlayan Stable Diffusion modelleri için koşullu bir kontrol çerçevesidir. Stanford Üniversitesi'nde Lvmin Zhang ve Maneesh Agrawala tarafından geliştirilen ControlNet, donmuş difüzyon modeli kodlayıcılarına eğitilebilir kopya dalları ekleyerek modelin orijinal yeteneklerini değiştirmeden uzamsal koşullandırmayı öğrenmesini sağlar. Bu mimari, üretilen görsellerin kompozisyonu, yapısı ve uzamsal düzeni üzerinde ince ayarlı kontrol eklerken temel modelin üretim kalitesini korur. ControlNet birden fazla koşullandırma türünü eş zamanlı destekler ve kullanıcıların poz, derinlik ve kenar bilgisini birleştirerek olağanüstü hassasiyetle üretimi yönlendirebildiği karmaşık çok koşullu iş akışları oluşturur. Çerçeve, üretilen görsellerde tutarlı uzamsal yapıları sürdürmenin temel zorluğunu çözerek profesyonel AI görsel üretim iş akışlarında devrim yaratmıştır. Karakter pozları, mimari düzenler, ürün yerleşimleri ve sahne kompozisyonları üzerinde hassas kontrol ihtiyacı olan profesyonel sanatçılar ve tasarımcılar için vazgeçilmez bir araç haline gelmiştir. ControlNet açık kaynaklıdır ve SD 1.5 ile SDXL dahil çeşitli Stable Diffusion sürümleri için önceden eğitilmiş modellerle Hugging Face üzerinde mevcuttur. ComfyUI ve Automatic1111 ile sorunsuz entegre olur. Konsept sanatçıları, karakter tasarımcıları, mimari görselleştiriciler, moda tasarımcıları ve animasyon stüdyoları üretim iş akışları için ControlNet'e güvenir. Etkisi Stable Diffusion'ın ötesine geçerek FLUX.1 ve diğer modern modellerde benzer kontrol mekanizmalarına ilham vermiştir.
InstantID
InstantID, InstantX Team tarafından geliştirilen ve yalnızca tek bir referans fotoğrafı kullanarak belirli bir kişinin çeşitli stil, poz ve bağlamlarda görsellerini üretebilen sıfır atışlı kimlik koruyucu görsel üretim çerçevesidir. Birden fazla referans görsel veya zaman alıcı ince ayar gerektiren geleneksel yüz değiştirme veya kişiselleştirme yöntemlerinden farklı olarak InstantID, bir yüz kodlayıcı, IP-Adapter ve yüz referans noktası rehberliği için ControlNet'i birleştiren yenilikçi bir mimari aracılığıyla yalnızca bir yüz fotoğrafından doğru kimlik koruması sağlar. Sistem, referans görselinden detaylı yüz kimlik özelliklerini çıkarır ve üretim sürecine enjekte ederek üretilen kişinin çeşitli çıktı senaryolarında tanınabilir yüz hatlarını, oranlarını ve karakteristiklerini korumasını sağlar. InstantID, farklı sanatsal stillerde portreler üretme, kişiyi hayal edilen sahne veya bağlamlara yerleştirme, profil resimleri ve avatarlar oluşturma ve tutarlı karakter temsilleri içeren pazarlama materyalleri üretme dahil çeşitli yaratıcı uygulamaları destekler. Model, temel olarak Stable Diffusion XL ile çalışır ve açık kaynaklıdır, yerel dağıtım için GitHub ve Hugging Face üzerinde mevcuttur. Topluluk tarafından geliştirilen düğümler aracılığıyla ComfyUI ile entegre olur ve bulut API'leri üzerinden erişilebilir. Portre fotoğrafçıları, sosyal medya içerik üreticileri, kişiselleştirilmiş kampanyalar oluşturan pazarlama ekipleri, karakter varyantları tasarlayan oyun geliştiricileri ve kimlik tabanlı yaratıcı çalışmaları keşfeden dijital sanatçılar InstantID'yi kullanır. Çerçeve, sonraki kimlik koruma modellerini etkilemiştir ve açık kaynak ekosisteminde tek görsellik kimlik transferi için en etkili çözümlerden biri olmaya devam etmektedir.
IP-Adapter
IP-Adapter, Tencent AI Lab tarafından geliştirilen ve temel modelin herhangi bir ince ayarını gerektirmeden text-to-image difüzyon modelleri için görsel rehberli üretim sağlayan bir görsel prompt adaptörüdür. Adaptör, bir CLIP görsel kodlayıcı kullanarak referans görsellerden görsel özellikler çıkarır ve bu özellikleri ayrıştırılmış bir dikkat mekanizması aracılığıyla difüzyon modelinin çapraz dikkat katmanlarına enjekte ederek çalışır. Bu, kullanıcıların metin promptlarının yanında referans görselleri görsel promptlar olarak sağlamasına olanak tanır ve metin açıklamasını takip ederken referansla stilistik öğeleri, kompozisyonel özellikleri veya görsel karakteristikleri paylaşan görseller üretmek için üretim sürecini yönlendirir. IP-Adapter, üretilen görselin referansın sanatsal stilini benimsediği stil transferi ve referanstan belirli konuların veya öğelerin çıktıda göründüğü içerik transferi dahil birden fazla çalışma modunu destekler. Adaptör hafiftir ve temel modelin çıkarım sürecine minimum hesaplama yükü ekler. Poz, stil ve içeriğin her birinin bağımsız olarak kontrol edilebildiği sofistike iş akışları sağlayarak çok modlu koşullandırma için ControlNet gibi diğer kontrol mekanizmalarıyla birleştirilebilir. IP-Adapter açık kaynaklıdır ve SD 1.5 ile SDXL dahil çeşitli Stable Diffusion sürümleri için mevcuttur. Topluluk uzantıları aracılığıyla ComfyUI ve Automatic1111 ile entegre olur. Üretilen görsellerde görsel tutarlılık sağlaması veya referans materyalden belirli estetik nitelikleri aktarması gereken dijital sanatçılar, ürün tasarımcıları, marka yöneticileri ve içerik üreticileri IP-Adapter'ın yeteneklerinden özellikle faydalanır.
IP-Adapter FaceID
IP-Adapter FaceID, Tencent AI Lab tarafından geliştirilen ve yüz kimlik bilgisini difüzyon görüntü üretim sürecine enjekte ederek belirli bir kişinin yüz özelliklerini sadakatle koruyan yeni görüntüler oluşturmayı mümkün kılan özelleştirilmiş bir adaptör modülüdür. Geleneksel yüz değiştirme yaklaşımlarından farklı olarak, IP-Adapter FaceID, InsightFace kütüphanesinden yüz tanıma özellik vektörleri çıkarır ve bunları çapraz dikkat katmanları aracılığıyla difüzyon modeline besler, böylece modelin tutarlı yüz kimliğini korurken çeşitli sahneler, stiller ve kompozisyonlar üretmesine olanak tanır. Mevcut Stable Diffusion modellerinin üzerine katmanlanan yalnızca yaklaşık 22 milyon adaptör parametresiyle FaceID, kişiye özel ince ayar veya birden fazla referans görüntü gerektirmeden dikkat çekici kimlik koruması sağlar. Tek bir net yüz fotoğrafı, kişiyi çeşitli sanatsal stillerde, farklı kıyafetlerle, çeşitli ortamlarda ve yeni pozlarda üretmek için yeterlidir. Adaptör hem SDXL hem de SD 1.5 temel modellerini destekler ve poz, derinlik ve kompozisyon üzerinde ek kontrol için diğer ControlNet adaptörleriyle birleştirilebilir. IP-Adapter FaceID Plus varyantları, geliştirilmiş benzerlik ve ayrıntı koruması için yüz gömülerinin yanına ek CLIP görüntü özellikleri ekler. Apache 2.0 lisansı altında tamamen açık kaynaklı olan model, ComfyUI iş akışlarına ve Diffusers kütüphanesine yaygın olarak entegre edilmiştir. Yaygın uygulamalar arasında kişiselleştirilmiş avatar oluşturma, çeşitli sanatsal stillerde özel portre üretimi, hikaye anlatımında karakter tutarlılığı ve kişiselleştirilmiş pazarlama içeriği yer alır.