Bir resim bin kelimeye bedeldir derler ama bin kelime bir resme bedel olabilir mi? Yapımcı ve geliştirici Diego Trujillo Pisanty, arkadaşıyla birlikte öğrenmeye çalıştı. Ahududu Pigüçlü kör kamera proje. Bir resim yapmak için ışığı yakalamak üzere bir mercek kullanmak yerine, sesi dinler ve algılanan sese dayalı olarak çevresinde ne olabileceğine dair yaklaşık bir tahmin oluşturur.
Cihaz, normal bir kameraya benzer şekilde çalışır, çünkü kamerayı yakalamak istediğiniz şeye yönlendirir ve bir görüntü oluşturmak için bir düğmeye basarsınız. Ancak bu durumda, seslerin yakalanmasını güçlendirmeye yardımcı olmak için ön tarafında dev bir korna vardır. Kullanıcılar, düğmeye basmadan önce bu kornayı yakalamak istedikleri yöne doğrultmalıdır. Kamera daha sonra sesi bir AI filtresi aracılığıyla ayrıştırır ve bir görüntü oluşturur.
Pisanty’ye göre, sadece bu proje için özel bir yapay sinir ağı (veya ANN) geliştirdi. Yapay zekayı Mexico City çevresinde çekilmiş bir dizi videoya dayanarak kendi modelleriyle eğitti.
Model, videonun her karesi alınarak ve sesin son saniyesine eşlik edilerek oluşturulmuştur. Bu, sistemin görüntü oluşturmak için kullanabileceği bir ses ve video ilişkisi oluşturmaya yardımcı oldu. Bu şekilde eğitildiğinden, yarattığı her şey gevşek bir şekilde Mexico City’nin şehir içi görüntülerine dayanmaktadır.
resim 1 ile ilgili 4
Bu proje için Pisanty, bir Raspberry Pi 3B modülü kullanıyor. Bununla birlikte, bir Raspberry Pi 4 kullanarak yeniden oluşturmak mümkün olacaktır. Pi, Tensorflow’u idare edebildiği sürece çalışması gerekir. Kamera ayrıca bir tür vizör görevi gören küçük bir ekrana sahiptir. Görüntülerin ne zaman işlendiğini kullanıcılara bildirir ve oluşturulan görüntülerin önizlemesini sağlar. Her şey özel bir 3D baskılı kabuğun içine yerleştirilmiştir.
Kör kamerayı eğitmek için kullanılan AI modeli, Python 3 kullanılarak oluşturuldu. Tensorflow 2 ile çalışacak şekilde tasarlandı ve TFLite kullanan Raspberry Pi üzerinde çalışıyor. Bu Raspberry Pi projesini yeniden yaratmak veya nasıl bir araya geldiğine daha yakından bakmak istiyorsanız, Pisanty’nin paylaştığı videoya göz atın. Youtube ve proje hakkında daha fazlasını onun adresinde okuyun İnternet sitesi.
