Yenilikçi Video Analizi: Memories.ai
Günümüzde, birçok yapay zeka aracı bir videoyu inceleyip özetleyebilme yeteneğine sahipken, birden fazla video ve saatlerce görüntü içeriğini sorguladığınızda işler karmaşık hale geliyor. Bu durum, güvenlik şirketleri için, farklı kameralar aracılığıyla elde edilen binlerce saatlik görüntüyü analiz etmeyi isteyen firmalar için büyük bir sınırlama oluşturuyor. Benzer şekilde, pazarlama şirketleri de farklı video kampanyalarını ve ürün çekimlerini incelemek istiyor.
Memories.ai, bu sorunu çözmeyi hedefleyen bir yapay zeka platformu olarak karşımıza çıkıyor. Şirket, 10 milyon saat video işleyebilme kapasitesine sahip. Görüntü analiz etmek isteyen firmalara, arama yapılabilir endeksleme, etiketleme, segmentasyon ve toplama gibi özellikler sunarak bağlamsal bir katman sağlamayı amaçlıyor.
Kurucular ve Vizyon
Şirketin kurucu ortaklarından olan Dr. Shawn Shen, Meta’nın Reality Labs’ında araştırma bilimcisi olarak görev yaparken doktora çalışmasını sürdürüyordu. Diğer kurucu ortak Enmin (Ben) Zhou ise Meta’da makine öğrenimi mühendisi olarak çalışmış. Shen, “Tüm büyük yapay zeka şirketleri, Google, OpenAI ve Meta gibi, uçtan uca modeller üretmeye odaklanıyor. Bu yetenekler iyi olsa da, bu modeller genellikle belirli bir bağlamdan, yani sadece bir veya iki saatlik video içeriğinden öteye gitmekte zorluk yaşıyor” diyor.
İnsanların görsel hafızalarını kullandıklarında büyük bir veri yelpazesinden geçtiklerine dikkat çeken Shen, bunu ilham olarak aldıklarını belirtiyor. Bu ilham doğrultusunda, saatler süren video içeriklerini daha iyi anlayabilen bir çözüm geliştirmek istemişler.
Yatırım Desteği
Memories.ai, bu amacı gerçekleştirmek için 8 milyon dolar değerinde bir başlangıç yatırım turu gerçekleştirdi. Yatırım turu, Susa Ventures liderliğinde, Samsung Next, Fusion Fund, Crane Ventures, Seedcamp ve Creator Ventures gibi katılımcılarla gerçekleşti. Shen, başlangıçta 4 milyon dolar toplamayı hedeflediklerini ancak yatırımcı ilgi nedeniyle bu miktarın iki katına çıktığını belirtiyor.
Susa Ventures’dan Misha Gordon-Rowe, Shen’in teknik yeterliliği ve video anlama yeteneğindeki sınırları zorlayıcı hevesinden bahsederek, “Memories.ai, sunduğu çözüm ile önemli birinci parti görsel zeka verisini ortaya çıkarabilir. Uzun bağlam görsel zekası için piyasada bir boşluk olduğunu hissettik ve bu nedenle şirkete yatırım yapmaya karar verdik” diyor.
Güvenlik ve Pazarlama Uygulamaları
Samsung Next’in yatırımı için bir başka motivasyon ise, Memories.ai’nin tüketicilere yönelik uygulamalar sunabilecek olması. Sam Campbell bu konuda, “Memories.ai’nin cihaz üzerindeki işlem yapabilmesi harika. Bu, video verilerini bulutta saklamanızı gerektirmez. Bu, güvenlik kameraları yerleştirirken gizlilik kaygısı olan kişiler için daha iyi güvenlik uygulamalarına kapı açabilir” diyor.
Memories.ai, kendi teknoloji yelpazesi ve modellerini kullanarak analiz gerçekleştirdiğini belirtiyor. İlk olarak, videolardan gürültüyü çıkararak önemli verileri saklama üzerine bir sıkıştırma katmanından geçiriyorlar. Ardından, bir endeksleme katmanı ekleyerek video verisini, doğal dil sorguları ile arama yapılabilir hale getiriyor. Son olarak, veri özetleme katmanı da indeksten gelen verileri özetleyerek raporlar oluşturuyor.
Şirket, şu anda pazarlama ve güvenlik alanında iki tür şirkete hizmet veriyor. Pazarlama şirketleri, markalarıyla ilgili sosyal medya trendlerini araştırmak ve hangi tür videoların çekileceğini belirlemek için bu araçları kullanabiliyor. Ayrıca, Memories.ai, pazarlamacılara bu videoları oluşturması için gerekli araçları da sağlıyor.
Güvenlik şirketleriyle yapılan iş birlikleri, güvenlik görüntülerini analiz ederek videolardaki tehlikeli davranışları belirlemeyi amaçlıyor. Gelecekte ise, müşterilerin “Son bir haftada görüşme yaptığım kişilerin hepsini bana anlat” gibi sorular sormalarının da mümkün olması planlanıyor.
Gelecek Vizyonu
Shen, kullanıcıların yaşamlarına dair bağlam kazanacak bir yapay zeka asistanı hayal ediyor. Bu asistan, kullanıcının fotoğrafları aracılığıyla veya akıllı gözlükler aktif hale geldiğinde bilgi toplayabilecek. Ayrıca, bu teknolojinin insan benzeri robotların karmaşık görevleri öğrenmesine veya otonom araçların farklı rotaları hatırlamasına yardımcı olabileceğini belirtiyor.
Memories.ai şu anda 15 kişilik bir ekip ile faaliyet gösteriyor ve elde edilen fon, ekiplerini büyütmek ve arama işlevselliğini geliştirmek için kullanılacak. Şirket, mem0 ve Letta gibi benzer girişimlerle rekabet ediyor. Bu girişimler, yapay zeka modelleri için bir bellek katmanı sağlamaya çalışıyor. Ancak şu anki sınırlı video desteği, bu alandaki rekabeti zorlaştırıyor. Bunun yanı sıra, TwelveLabs ve Google gibi büyük şirketler de video anlayışı üzerine çalışıyor. Shen, ancak şirketinin çözümünün daha yatay bir yapıya sahip olduğunu ve farklı video modelleri ile çalışabileceğini düşünüyor.


