1 exaflop’un üzerinde performansa sahip tek bir sistem, bir yıldır en üretken süper bilgisayarlar listesinde büyük bir farkla lider durumdayken ve medya, 2 exaflop’un üzerinde performansa sahip yapım aşamasındaki iki sistemi tartışırken, Cerebras Systems ve G42 beklenmedik bir şekilde 4 exaflop performansa sahip Condor Galaxy 1 (CG-1) süper bilgisayarını tanıttı! Doğru, burada nüanslar var ve süper bilgisayarın kendisi son derece sıra dışı ve bu sınıftaki diğer tüm tanıdık sistemlerden farklı.
Belirtilen performans, AI eğitim görevlerinde bir ölçümdür. Ve bunlar yarı hassasiyetli hesaplamalar, yani FP16. FP32 için bir gösterge yok, ancak yine de Top500 listesinin başında yer alan aynı Frontier süper bilgisayarı, aynı modda yaklaşık 3,3 exaflops güç sunuyor. Yani, görünüşe göre CG-1, dünyadaki en üretken süper bilgisayar olarak adlandırılabilir. Ancak içerik oluşturucuların kendileri bile biraz farklı söylüyor: Bu, yapay zeka eğitimi için en verimli süper bilgisayar. Bu formülasyon ile doğrulukla ilgili herhangi bir sorun yoktur.
Ancak, hepsi bu değil. Gerçek şu ki, CG-1 başlığında bilerek bir birim içeriyor. Condor Galaxy 1, Cerebras Systems ve G42 tarafından üretilmesi planlanan dokuz özdeş süper bilgisayardan yalnızca ilki. Ve bunlar ayrı kurulumlar değil, tek bir bağlantılı ağ olacak! Süper bilgisayarlar CG-2 ve CG-3, önümüzdeki yılın başlarında ABD’de konuşlandırılacak ve tüm sistemin nihai performansı, inanılmaz bir 36 exaflop olacak. Ve burada, şirketlerin basın bültenlerinde süper bilgisayar ağlarının yapay zekanın gelişiminde devrim yaratacağını söylemelerinde kusur bulmak pek mümkün değil.
Burada hatırlatmakta fayda var Cerebras Systems, 2019 yılında iPad Pro büyüklüğündeki çipi ile herkesi kendine hayran bırakan bir firma. Gofret Ölçekli Motor adı verilen çözüm, 1,2 trilyon transistör içeriyordu ve 300 mm’lik dikdörtgen bir levhadan sıkıştırılabilecek en büyük boyutlara sahipti. 2021 yılında şirket aynı boyutlarda bu ürünün ikinci neslini (Wafer Scale Engine 2 veya WSE-2) piyasaya sürdü ancak 7nm işlem teknolojisi sayesinde transistör sayısı 2.6 trilyona çıktı. WSE-2, 46.000 mm’den fazla alana sahiptir2, 850.000 çekirdek ve 20 PB/s aktarım hızıyla 40 GB yerel bellek içerir. Çipin kendisinin tüketimi bilinmiyor, ancak tek bir WSE-2’ye dayalı bir CS-2 sistemi 23 kW güce sahip.
Muazzam sayıda çekirdek sayesinde, sınıfındaki en güçlü süper bilgisayarı oluşturmak için yalnızca 64 yongaya ihtiyaç vardı. Daha doğrusu, 64 CS-2 sistemi, ancak her biri yalnızca bir WSE-2 yongası içeriyor. Sonuç olarak, süper bilgisayarın 54 milyondan fazla çekirdeği vardır. Karşılaştırma için: Frontier, 8,7 milyon çekirdeğe sahiptir.
Kayıt performansı, geliştiricilerin yalnızca 4 exaflop hakkında değil, aynı zamanda yapılandırmayı 100 trilyona kadar parametreyi destekleyecek şekilde genişletme olasılığıyla yaklaşık 600 milyar parametre hakkında konuşmasına olanak tanır. Bu arada sistem konfigürasyonunda AMD Epyc işlemciler de yer alıyor ancak firma model belirtmiyor. Sadece süper bilgisayarın kendisinin 72.704 işlemci çekirdeği içerdiği biliniyor.
Cerebras ve G42, CG-1’i bir bulut hizmeti olarak sunuyor, böylece herkes yeni devin gücünden koşullu olarak yararlanabiliyor.
CG-1, FP16’da 4 exaflop yapay zeka hesaplama sağlayarak, dağıtılmış bilgi işlem sorunlarını ortadan kaldırırken yapay zeka eğitim süresini önemli ölçüde azaltır. Birçok bulut şirketi, inşa edilmesi milyarlarca dolara mal olan ancak kullanımı son derece zor olan devasa GPU kümelerini duyurdu. Bir modeli binlerce küçük GPU’ya yaymak aylar ve nadir deneyime sahip düzinelerce insan gerektirir. CG-1 bu sorunu ortadan kaldırır. Üretken bir yapay zeka modeli kurmak aylar değil dakikalar alır ve tek bir kişi tarafından yapılabilir. CG-1, ABD’de konuşlandırılacak üç adet 4 exaflops AI süper bilgisayarından ilkidir. Gelecek yıl boyunca, şaşırtıcı bir 36 exaflops verimli özel AI bilgi işlem sunmak için bu dağıtımı G42 ile genişletmeyi planlıyoruz.
Ayrıca teknik işin tamamen Cerebras Systems’a ait olduğunu da söylemek gerekiyor. G42, süper bilgisayarlar oluşturmak için donanımı Cerebras’tan satın alan BAE’li bir teknoloji grubudur.