Elon Musk, Tesla’nın sadece bir otomobil üreticisi olmasını istemiyor. Tesla’nın bir yapay zeka şirketi olmasını istiyor, arabaların kendi kendine nasıl gideceğini çözmüş bir şirket.
Bu görev için önemli olan, Tesla’nın Tam Otonom Sürüş (FSD) sinir ağlarını eğitmek için tasarlanmış özel yapım süper bilgisayarı Dojo’dur. FSD aslında tamamen otonom değildir; bazı otonom sürüş görevlerini gerçekleştirebilir, ancak yine de direksiyon başında dikkatli bir insana ihtiyaç duyar. Ancak Tesla, daha fazla veri, daha fazla işlem gücü ve daha fazla eğitimle neredeyse otonom sürüşten tam otonom sürüşe geçebileceğini düşünüyor.
Ve işte Dojo tam bu noktada devreye giriyor.
Musk bir süredir Dojo’yu ima ediyor, ancak yönetici 2024 boyunca süper bilgisayar hakkındaki tartışmaları hızlandırdı. Dojo’nun Tesla için önemi varoluşsal olabilir – EV satışları düşerken, yatırımcılar Tesla’nın otonomiye ulaşabileceğine dair güvence istiyor. Aşağıda Dojo’dan bahseden ve vaat edenlerin bir zaman çizelgesi bulunmaktadır.
2019
Dojo’nun ilk sözleri
22 Nisan – Tesla’nın Otonomi Günü’nde, otomobil üreticisi AI ekibini sahneye çıkardı ve Autopilot ve Tam Otonom Sürüş ve her ikisini de çalıştıran AI hakkında konuştu. Şirket, özellikle sinir ağları ve otonom araçlar için tasarlanmış Tesla’nın özel yapım çipleri hakkında bilgi paylaşıyor.
Etkinlik sırasında Musk, Dojo’yu taklit ederek bunun yapay zekayı eğitmek için bir süper bilgisayar olduğunu ortaya koyuyor. Ayrıca o dönemde üretilen tüm Tesla arabalarının tam otonom sürüş için gerekli tüm donanımlara sahip olacağını ve yalnızca bir yazılım güncellemesine ihtiyaç duyacağını belirtiyor.
2020
Musk, Dojo tanıtım turuna başlıyor
2 Şubat – Misk diyor Tesla, yakında dünya çapında sensörlere ve tam otonom sürüş için gereken hesaplamalara sahip bir milyondan fazla bağlantılı araca sahip olacak ve Dojo’nun yeteneklerini öne çıkaracak.
“Eğitim süper bilgisayarımız Dojo, büyük miktarda video eğitim verisini işleyebilecek ve çok sayıda parametre, bol miktarda bellek ve çekirdekler arasında ultra yüksek bant genişliği ile hiperuzay dizilerini verimli bir şekilde çalıştırabilecek. Bunlara daha sonra değineceğiz.”
14 Ağustos – Musk tekrarlıyor Tesla’nın Dojo adlı bir sinir ağı eğitim bilgisayarı geliştirme planı, “gerçekten büyük miktarda video verisini işlemek” için “bir canavar” olarak adlandırılıyor. Ayrıca Dojo’nun ilk versiyonunun “yaklaşık bir yıl sonra” bu da lansman tarihinin 2021 Ağustos civarına denk gelmesi anlamına geliyor.
Aralık 31 — Elon diyor ki Dojo’ya gerek yokancak otonom sürüşü daha iyi hale getirecek. “İnsan sürücülerden daha güvenli olmak yeterli değil, Autopilot’un nihayetinde insan sürücülerden 10 kat daha güvenli olması gerekiyor.”
2021
Tesla Dojo’yu resmileştiriyor
19 Ağustos – Otomobil üreticisi, Tesla’nın AI ekibine mühendisleri çekmek için düzenlenen bir etkinlik olan Tesla’nın ilk AI Günü’nde Dojo’yu resmen duyuruyor. Tesla ayrıca otomobil üreticisinin Dojo süper bilgisayarına güç vermek için Nvidia’nın GPU’sunun yanı sıra kullanacağını söylediği D1 çipini de tanıtıyor. Tesla, AI kümesinin 3.000 D1 çipine ev sahipliği yapacağını belirtiyor.
12 Ekim – Tesla sürümleri A Dojo Teknolojisi teknik dokümanı“Tesla’nın yapılandırılabilir kayan nokta biçimleri ve aritmetiğine yönelik bir kılavuz.” Beyaz bülten, derin öğrenme sinir ağlarında kullanılan ve “tamamen yazılımda, tamamen donanımda veya yazılım ve donanımın herhangi bir kombinasyonunda” uygulanabilen yeni bir ikili kayan nokta aritmetiği türü için teknik bir standart özetliyor.
2022
Tesla Dojo’daki ilerlemeyi açıklıyor
12 Ağustos – Musk, Tesla’nın “Dojo’daki aşama. Gelecek yıl çok sayıda ek GPU satın almamıza gerek kalmayacak.”
30 Eylül – Tesla’nın ikinci AI Günü’nde şirket, 2,2 megavat yük testi yapan ilk Dojo kabinini kurduğunu açıkladı. Tesla, günde bir fayans inşa ettiğini söylüyor (bu, 25 D1 çipinden oluşuyor). Tesla, “Mars’taki Cybertruck”ın AI tarafından oluşturulmuş bir görüntüsünü oluşturmak için Stable Diffusion modelini çalıştıran Dojo’yu sahnede gösteriyor.
Önemlisi, şirket tam bir Exapod kümesinin 2023’ün 1. çeyreğinde tamamlanması için hedef tarih belirliyor ve Palo Alto’da toplam yedi Exapod inşa etmeyi planladığını söylüyor.
2023
‘Uzun vadeli bir bahis’‘
19 Nisan – Musk, Tesla’nın birinci çeyrek kazançları sırasında yatırımcılara Dojo’nun “eğitim maliyetinde büyüklük sırasına göre bir iyileştirme potansiyeline sahip olduğunu” ve ayrıca “Amazon Web Services’ın web hizmetleri sunduğu şekilde diğer şirketlere sunabileceğimiz satılabilir bir hizmet olma potansiyeline sahip olduğunu” söyledi.
Musk ayrıca Dojo’ya “uzun vadeli bir bahis” olarak baktığını, ancak “yapılmaya değer bir bahis” olduğunu belirtiyor.
21 Haziran — Tesla AI X hesabı gönderiler şirketin sinir ağlarının halihazırda müşteri araçlarında olduğu. Konu, Tesla’nın mevcut ve tahmini işlem gücünün zaman çizelgesini içeren bir grafik içeriyor ve Dojo üretiminin başlangıcını Temmuz 2023 olarak belirliyor, ancak bunun D1 çiplerine mi yoksa süper bilgisayarın kendisine mi atıfta bulunduğu açık değil. Musk diyor ki Aynı gün Dojo zaten çevrimiçiydi ve Tesla veri merkezlerinde görevler yürütüyordu.
Şirket ayrıca Tesla’nın hesaplama gücünün Şubat 2024’e kadar tüm dünyada ilk beşte yer alacağını (bunun başarılı olduğuna dair hiçbir belirti yok) ve Tesla’nın Ekim 2024’e kadar 100 exaflop’a ulaşacağını öngörüyor.
19 Temmuz – Tesla notlar ikinci çeyrek kazanç raporunda Dojo’nun üretimine başlandığını söyledi. Musk ayrıca Tesla’nın 2024’e kadar Dojo’ya 1 milyar dolardan fazla harcama yapmayı planladığını söyledi.
6 Eylül – Musk gönderileri X üzerinde Tesla’nın AI eğitim hesaplamasıyla sınırlı olduğunu, ancak Nvidia ve Dojo’nun bunu düzelteceğini söylüyor. Tesla’nın arabalarından günde yaklaşık 160 milyar kare videodan gelen verileri yönetmenin son derece zor olduğunu söylüyor.
2024
Ölçeklendirme planları
24 Ocak – Tesla’nın dördüncü çeyrek ve tam yıl kazanç görüşmesi sırasında Musk, Dojo’nun yüksek riskli, yüksek ödüllü bir proje olduğunu tekrar kabul ediyor. Ayrıca Tesla’nın “Nvidia ve Dojo’nun ikili yolunu” takip ettiğini, “Dojo’nun çalıştığını” ve “eğitim işleri yaptığını” söylüyor. Tesla’nın bunu ölçeklendirdiğini ve “Dojo 1.5, Dojo 2, Dojo 3 ve benzeri şeyler için planları” olduğunu belirtiyor.
26 Ocak – Tesla, Buffalo’da bir Dojo süper bilgisayarı inşa etmek için 500 milyon dolar harcamayı planladığını duyurdu. Musk daha sonra yatırımı biraz küçümsüyor, X’e gönderi 500 milyon dolar büyük bir meblağ olsa da, “sadece Nvidia’dan 10k H100 sistemine eşdeğer. Tesla bu yıl Nvidia donanımına bundan daha fazlasını harcayacak. Yapay zekada rekabetçi olmak için masa bahisleri şu anda yılda en az birkaç milyar dolar.”
30 Nisan – TSMC’nin Kuzey Amerika Teknoloji Sempozyumu’nda şirket, Dojo’nun yeni nesil eğitim karosunun (25 çipi birleştirerek tek bir karo oluşturmak yerine tüm Dojo karosunu tek bir silikon gofrete yerleştiren D2) halihazırda üretimde olduğunu söylüyor. IEEE Spektrumu.
20 Mayıs – Misk notlar Giga Texas fabrika uzantısının arka kısmının “süper yoğun, su soğutmalı bir süper bilgisayar kümesinin” inşasını içereceği belirtildi.
4 Haziran – A CNBC raporu Musk’ın Tesla için ayrılmış binlerce Nvidia çipini X ve xAI’ye yönlendirdiğini ortaya koyuyor. Başlangıçta raporun yanlış olduğunu söyledikten sonra, Musk X’te paylaşım yapıyor Tesla’nın, Giga Texas’ın güney uzantısındaki devam eden inşaat nedeniyle Nvidia çiplerini gönderip çalıştırabileceği bir yeri olmadığını, “bu yüzden sadece bir depoda duracaklarını” belirtti. Uzantının “FSD eğitimi için 50 bin H100’e ev sahipliği yapacağını” belirtti.
O da gönderiler:
“Tesla’nın bu yıl yapacağını söylediğim yaklaşık 10 milyar dolarlık yapay zeka ile ilgili harcamanın yaklaşık yarısı dahili, esas olarak Tesla tarafından tasarlanan yapay zeka çıkarım bilgisayarı ve tüm arabalarımızda bulunan sensörler, artı Dojo. Yapay zeka eğitim süper kümelerini oluşturmak için NVidia donanımı maliyetin yaklaşık 2/3’ü. Tesla’nın bu yıl Nvidia satın alımları için şu anki en iyi tahminim 3 ila 4 milyar dolar.”
1 Temmuz – Musk X hakkında açıklamalarda bulundu Mevcut Tesla araçlarının şirketin yeni nesil AI modeli için doğru donanıma sahip olmayabileceğini söylüyor. Yeni nesil AI ile parametre sayısındaki yaklaşık 5 kat artışın “araç çıkarım bilgisayarını yükseltmeden elde edilmesinin çok zor” olduğunu söylüyor.
Nvidia tedarik zorlukları
23 Temmuz – Musk, Tesla’nın ikinci çeyrek kazanç görüşmesinde, Nvidia donanımlarına olan talebin “o kadar yüksek olduğunu ki, GPU’ları edinmenin genellikle zor olduğunu” söyledi.
Musk, “Bu nedenle, ihtiyacımız olan eğitim kapasitesine sahip olduğumuzdan emin olmak için Dojo’ya çok daha fazla çaba harcamamız gerektiğini düşünüyorum” diyor. “Ve Dojo ile Nvidia ile rekabet edebilecek bir yol görüyoruz.”
Tesla’nın yatırımcı destesindeki bir grafik, Tesla AI eğitim kapasitesinin 2024 yılı sonuna kadar yaklaşık 90.000 H100 eşdeğer GPU’ya çıkacağını öngörüyor; bu rakam Haziran ayındaki 40.000 civarındaydı. Aynı günün ilerleyen saatlerinde X’te Musk gönderileri Dojo 1’in yıl sonuna kadar “yaklaşık 8 bin H100 eşdeğerinde çevrimiçi eğitime” sahip olacağını söylüyor. Ayrıca şunları da paylaşıyor fotoğraflar Tesla’nın Cybertruck’larında kullanılan buzdolabı benzeri paslanmaz çelik dış yüzeyin kullanıldığı süper bilgisayarın görüntüsü.
XXX
30 Temmuz – Musk, AI5’in yüksek hacimli üretime yaklaşık 18 ay uzaklıkta olduğunu söyledi cevap vermek AI5 çıktığında geride kalmaktan öfkelenen Tesla HW4/AI4 sahiplerinden oluşan bir kulüp kurduğunu iddia eden birinin gönderisine.
3 Ağustos – Musk X’te paylaşım yapıyor “Giga Texas’taki Tesla süper bilgisayar kümesinin (diğer adıyla Cortex)” bir incelemesini yaptığını söyledi. Bunun yaklaşık 100.000 H100/H200 Nvidia GPU’sundan oluşacağını ve “FSD ve Optimus’un video eğitimi için büyük depolama alanına” sahip olacağını belirtti.