Google Research yeni bir AI gürültü azaltma aracı ekledikten sonra fotoğrafçılar yakında “karanlıkta görebilecekler”. ÇokluNeRF (yeni sekmede açılır) proje.
RawNeRF programı, daha karanlık koşullarda ve düşük ışık ayarlarında çekilen fotoğraflara daha yüksek düzeyde ayrıntı (ve çok daha az çirkin artifakt) eklemek için yapay zekayı kullanarak görüntüleri okuyabilir. Projenin arkasındaki ekibe göre, diğer tüm gürültü azaltma araçlarından daha iyi çalışıyor.
“NeRF, birçok gürültülü ham giriş üzerinde optimize edildiğinde, o kadar doğru bir sahne temsili üretir ki, işlenmiş özgün görünümleri, aynı geniş taban çizgisi giriş görüntülerinde çalışan özel tek ve çok görüntülü derin ham gürültü gidericilerden daha iyi performans gösterir.” araştırmacılar açıkladı (yeni sekmede açılır) bir Cornell Üniversitesi makalesinde.
NeRF nedir?
NeRF bir görünüm sentezleyicidir – tarama yapabilen bir araçtır binlerce fotoğraf (yeni sekmede açılır) doğru yeniden inşa etmek 3D render.
Proje araştırmacılarından Ben Mildenhall’a göre NeRF, iyi aydınlatılmış fotoğraflar ve düşük gürültü seviyeleri ile en iyi sonucu veriyor. Başka bir deyişle, gündüz çekimleri için üretilmiştir.
Düşük ışık ve gece çekimleri sorunlu oldu, ayrıntıları gölgede gizledi veya postta parlaklığı artırırken daha gürültülü hale geldi. Mildenhall ve ekibin bulduğu sorun, gürültü giderme araçlarının gürültüyü bir şekilde azaltabilmesiydi, ancak görüntü kalitesi pahasına.
RawNeRF’nin ortaya çıkmasıyla birlikte, yapay zeka, ayrıntıları ortadan kaldırmadan gürültüyü susturmaya ayarlandı – kepenklerin ‘karanlıkta görmesine’ etkili bir şekilde izin verdi.
İçinde video gösterimi (yeni sekmede açılır), Karanlıkta NeRF, – orijinal olarak Mayıs 2022’de yayınlandı ve o sırada büyük ölçüde fark edilmedi – Mildenhall, yalnızca mum ışığında yanan bir cep telefonu alıyor. Google Researcher, RawNeRF’nin “sahneyi birlikte gürültüden arındırmak ve yeniden oluşturmak için birçok farklı kamera bakış açısından çekilmiş görüntüleri birleştirebildiğini” açıklıyor.
Yeniden oluşturulan görüntüler, doğrusal bir HDR renk uzayında işlenir ve kullanıcıların açıları, pozları, ton haritalamayı ve odaklamayı daha fazla manipüle etmesine olanak tanır. Mildenhall, videosunda bunların her birinin birlikte değişmesinin “sahnenin farklı bölgelerine dikkat çekebilecek bir atmosferik etki yarattığını” belirtiyor.
Henüz araştırma aşamasında ve resmi olarak desteklenen bir Google ürünü olmasa da (henüz), RawNeRF, yapay zekanın yaratıcıların çevrelerindeki dünyayı daha iyi yansıtmalarına nasıl yardımcı olabileceğine dair heyecan verici bir bakış sunuyor.