Bu dizinin ilk bölümlerini kaçırdıysanız, daha fazla arka plan için önce okuyabilirsiniz:
Bana doğru dürüst ver doktor, iyi mi kötü mü?
Dojo'nun en fazla hesaplama gücüne sahip süper bilgisayar olmaması kötü bir şey değil çünkü Tesla bu süper bilgisayarı çok sayıda 360 videoya dayalı sinir ağlarını eğitmek olan çok özel bir görev için inşa etti. Kodun tamamı, özellikle bu donanım üzerinde ideal olarak çalışmak üzere yazılmıştır. Dünyadaki diğer tüm süper bilgisayarlar ve hatta normal bilgisayarlar, çok çeşitli görevleri yerine getirebilmek için esneklik göz önünde bulundurularak üretilmiştir. Bir yandan, diğer süper bilgisayarların, hatta en güçlü Fugaku'nun bile, Tesla'nın aklındaki görevler için büyük olasılıkla Dojo'dan daha yavaş olacağı anlamına geliyor. Flip tarafında, bu aynı zamanda Dojo'nun Aşil topuğu olabilir, çünkü bilim adamlarının bir süper bilgisayar kullanmak isteyebilecekleri diğer simülasyonlar kolay olmayacak ve muhtemelen diğer herhangi bir süper bilgisayardaki kadar hızlı çalışmayacaktır.
Soru-Cevap bölümünde söylendiği gibi Tesla, Dojo'yu her şeyden önce kendisi ve ihtiyaçları için inşa etti. Tesla, bir insandan %1000 kat daha güvenli olana kadar FSD'yi geliştirmekle bitmeyecek. Tesla, %9 güvenlik rakamıyla önümüzdeki 99.9999999'da çalışmaya devam ederken, uzun yıllar boyunca direksiyonu olmayan bir arabada uyuyor olacağız. Ardından, Optimus Sub-Prime adlı Tesla robotunu duyurduklarına göre (çünkü en iyi zamanı henüz gelmedi), Tesla ve dolayısıyla Dojo'nun keşfedilmesi gereken yepyeni bir zorluk alanı var. Ayrıca, Dojo bilim adamlarının karanlık maddeyi veya kozmosun diğer gizemlerini bulmalarına yardımcı olamayacak olsa bile, robot mutfakları, fabrika otomasyonu, uzay inşaat robotları ve diğer birçok gerçek dünya AI uygulaması vardır. kesinlikle mükemmel olacak.
Dojo hala dünyanın en güçlü süper bilgisayarı olabilir
Dojo sadece 10 kabinden oluşur ve bu nedenle boyut söz konusu olduğunda dünyanın en küçük süper bilgisayarıdır. Fugaku ise 256 dolapları. Tesla, Dojo V54'e toplam 1 kabin için 64 kabin ekleseydi, Dojo Fugaku'yu geride bırakırdı. Son olarak, eğer Dojo 2.0 aslında Dojo'nun şu anda olduğundan 10 kat daha güçlüyse, o zaman sadece 10 kabinli olsa bile Dojo V2 sağlıklı bir farkla dünyanın en güçlü süper bilgisayarı olurdu.
Tesla, Dojo 2.0'ı nasıl geliştirecek?
Böylece, Tesla'nın mimarisinde çığır açan tüm yenilikleri gördüğüm andan itibaren, Elon'un 5 adımlı tasarım süreci, bu fikirlerin bazılarının nasıl ortaya çıktığı ve tasarım sürecinin yarısında gerçekleştiği ortaya çıktı.
Bu adımlar (yakın zamanda YouTuber ve SpaceX uzmanı Tim Dodd, “Gündelik Astronot” sayesinde 3 bölümlük Elon Musk röportajında öğrendiğimiz) şunlardır:
- Gereksinimlerinizi daha az aptal hale getirin
- Parçayı veya işlemi silmek için çok uğraşın
- 3 basitleştirin veya optimize edin
- Çevrim süresini hızlandırın
- Otomatikleştirmek.
Tasarım sürecinin yarısında muhtemelen ne olduğunun basitleştirilmiş bir versiyonu:
- Elon: "Tamam, beni tekrar fabrikasyon adımlarından geçir."
Donanım ekibi yanıt verir: "Yani, 1. adım, tüm bileşenler silikon gofrete eklenir. Adım 2, tüm SoC'leri gofretten kesersiniz."
Elon araya girer: "Ya yapmazsak?"
Donanım ekibi yanıt verir: “Ya ne yapmazsak?”
Elon açıklıyor: “Ya onları gofretten kesip orada bırakmazsak? Gofret üzerinde birbirleriyle konuşmalarını sağlayamaz mıyız?”
Ve gerisi tarih.
10× iyileştirme için, yapabilecekleri ilk şey, bir gofret üzerinde bir grup SoC bırakmak yerine, bir Sistem Ona W25 yerine afer Systems Ona Cbir gofret üzerinde kalça(lar). Modüler olmak faydalıdır, ancak tüm gofreti bir sistem haline getirmek performansı önemli ölçüde artırabilir. Bu da emsalsiz olacağından, performansı ne kadar artıracağını tahmin etmek zor ama içimden bir his bunun çok güçlü olacağını söylüyor. Ayrıca, bir sonraki mantıksal adım “1. Gereksinimlerinizi daha az aptal hale getirin.”
Ardından ikinci optimizasyon Tesla'dan değil Samsung'dan (veya TSMC'den) geliyor. Daha önce de söylendiği gibi, D1 yongasının 7nm ölçeğinde yapılmış olması, yongayı/göfretini üretenin Samsung ya da TSMC olduğunu gösteriyor. 2022 yılına kadar her iki şirket de 3nm süreçlerini çalışır duruma getirmeyi umuyor ve bu, performansı en az 2.3 kat artıracak ve güç tüketimini azaltacak. Aslında performans artışı, Tesla'nın çok daha iyi bir soğutma çözümüne sahip olması nedeniyle daha da büyük olabilir, bu da kalıp tarafından üretilen ısıdaki artışın daha az sorun olmasını sağlar ve saat hızlarından ödün vermez.
SoC'ler bir gofret üzerindeyken, Tesla ağ değiştirme yongalarının bu kadar yavaş olacağını ve kendi yongalarını yapmalarının daha iyi olacağını tahmin etmemiş gibi görünüyordu. Daha fazla zaman verilirse, bunu daha da geliştirebilirler. Son olarak, Tesla şu anda PCI-e gen 4'ü kullanıyor, ancak birkaç yıl içinde PCI-e gen 5, Tesla'nın gofretleri birbirine bağlayabildiği hızı iki katına çıkaracak.
Sonuç olarak, şu anda aklıma gelmeyenler de dahil olmak üzere hangi iyileştirmelerin 10 kat performans artışına yol açacağını söylemek zor. Yine de, Tesla'nın verdiği rakam bu ve hepimiz Elon'a karşı bahse girmekten daha iyisini biliyoruz.
Tesla'nın Eğitim Karosu Silikonun Oktovalvesidir
Artık Dojo'yu yakından tanıdığınıza göre, sizin için çizebileceğim gerçekten güzel bir paralellik var. Bazılarınız YouTube'da Sandy Munro'yu görmüş olabilir. Tesla Model Y ve Ford Mustang Mach-E'yi (diğer araçların yanı sıra) parçalara ayırdı. Umarım bu videoları izlemişsinizdir, ancak izlemediyseniz lütfen bir göz atın. bunu ve bunu.
Mach-E harika bir araba, yakın zamanda sürdüm (tam inceleme çok yakında geliyor), ancak ısı değişimini ele alma biçimleri, Sandy Munro onu görünce kelimenin tam anlamıyla bayılıyormuş gibi yapıyor - Tesla'nın Octovalve adında bir şeyi var ki bu yok Bir şeyleri birbirine bağlayan 30'dan fazla hortum yok. Octovalve, daha önce hiç yapılmamış bir şekilde hepsi bir arada çok sıkı bir pakettir. Yani 18 metrelik hortum yerine Tesla'nın 6 metresi var. Tesla'nın 35 parçası yerine 10'u var. Tesla'nın ısınması/soğutması daha zor olan 22.4 kg sıvı tutmak yerine sadece 9 kg sıvısı var.
Dojo için bu eğitim karosu, şüphesiz silikonun Octovalve'sidir. Yine de, bence, daha da etkileyici. Sağımdaki güzel masaüstü bilgisayarıma ve solumdaki ekrandaki Tesla eğitim karosuna baktığımda, gerçekten tüm tüpleri ve kabloları olan güçlü bilgisayarım o Mach-E haline gelmiş gibi geliyor. Hepimiz bayılmalıyız. Aynı zamanda, bilgisayar endüstrisinin standart düşünce ve geriye dönük uyumlu rahat bağlantı noktaları ve standartlarımızla ne kadar tembelleştiğini de gösteriyor. Bu gerçekten bir Nokia vs. iPhone anı.
Tek üzücü kısım, Tesla'nın SoC mimarisinin, video ile beslenen sinir ağlarını eğitmenin yanı sıra amaçlar için çok yetersiz donatılmasıdır. Bununla birlikte, standart işlemciler, grafik kartları ve SoC yongaları aynı tür zarafet, sıkıştırma ve modülerlik için tasarlanmış olsaydı, dünyadaki tüm bilgisayarları çok daha güçlü hale getirebilirdik. Aslında, Soru-Cevap çok net olmasa da, Tesla'nın Dojo'nun daha fazla türde görevi işleyebilmesi için farklı SoC'lerle "hibrit bir yığın" yapmak isteyebileceği anlaşılıyor.
Cybertruck ile Başlayan HW4 Çip
Soru-Cevap sırasında Elon, HW4'ün yaklaşık bir yıl içinde geleceğini ve Cybertruck ile birlikte piyasaya sürüleceğini açıkladı. Aynı zamanda Cybertruck, en az bir geliştirilmiş kameraya veya belki de tamamen yeni bir kamera sistemine sahip olacak. Yine de Elon, şu anda kullandıkları kameraları hala maksimuma çıkarmadıklarını ve otomobilin bir insan sürücüden %200-300 daha güvenli bir güvenlik seviyesinde tam özerkliğe ulaşması için yeni kamera sisteminin gerekli olmayacağını açıkladı.
Elon'un Özerklik Günü sırasında söylediklerinin aksine, HW4, HW4'ten 3 kat daha yetenekli olacak. Soru-Cevap bölümünde Tesla, sinir ağlarını çok karmaşık yapamayacaklarını veya HW3'teki gecikmenin çok yavaş olacağını belirtmişti. Bu, AI günü boyunca açıkça söylenmese de, HW4 ile gelen 4x güç artışı, HW3'e bir cevap bulmak için çok uzun sürecek olan daha fazla ve daha büyük/daha karmaşık sinir ağlarının uygulanabilir hale geleceği anlamına gelir. İlginç bir şekilde Tesla, daha büyük sinir ağlarının yalnızca onu besleyecek verileriniz varsa daha iyi çalıştığını da söyledi. Bu nedenle, bu kadar çok videoyu işleyebilen Dojo, Tesla'nın daha karmaşık sinir ağları yapması için tam olarak ihtiyaç duyduğu şeydir.
Dojo ve AI Neural Net Eğitim Yazılımını Başkalarına Sunmak
AI Günü'nden hemen önce bununla ilgili bir makale ve bir video yayınladım ve bunların hepsi AI Günü'nden sonra, özellikle de analiz için hala geçerli. Bu harika! Soru-Cevap'ın yorumuna bağlı olarak, tahminlerimde de haklı çıkmış olabilirim - ancak Tesla bunu açıkça doğrulamadı.
Tesla, yapay zeka etiketleme ve eğitim sürecini, makine öğrenimi uzmanlarının daha zor görevlere odaklanabileceği, etiketleme uzmanları ise Autopilot'u eğitmek için gereken ayak işlerinin daha fazlasını yapabileceği noktaya kadar önemli ölçüde otomatikleştirdi. Elon şimdi Twitter'da söyledi Tesla'nın Dojo'yu bir hizmet olarak sunacağını söyledi. Bununla birlikte, sunumdan ve Soru-Cevap bölümünden, siz: A) çok sayıda video görüntüsü ve simülasyonla eğitilmiş bir gerçek dünya yapay zekası yapmıyorsanız ve B) Tesla'nın son derece AI etiketleme ve eğitim için otomatik araçlar. Tesla, Dojo'nun ML bilim adamlarının alıştığı araçlarla iyi çalışmasını sağlamak için bir PyTorch uzantısı üzerinde çalışacaklarını belirtti, ancak izleyici bunun Dojo'nun çok özel donanımında ne kadar iyi çalışacağı konusunda şüpheci görünüyordu.
Bu açıkça doğrulanmasa da, bu büyük olasılıkla Tesla'nın eğitim ve etiketleme araçlarını, eksiksiz bir yazılım geliştirme yığını olan Dojo'ya erişim sunacağı anlamına geliyor ve yukarıdaki görüntü bu hipotezi destekliyor gibi görünüyor. Elon ayrıca Tesla'nın diğer otomobil üreticilerine FSD lisansı vermeye istekli olduğunu bir kez daha doğruladı ve umarım Tesla AI Day onları bu konuda en azından iki kez düşündürmüştür.
In The End
AI Day'i izlemek benim için kesinlikle şok ediciydi. Bilgisayar teknolojisi söz konusu olduğunda neyin mümkün olduğuna dair algımı paramparça etti. Bu, Tesla'nın bunu bana yaptığı en azından üçüncü kez, önceki zamanlarda da dahil olmak üzere. Pil Günü ve Özerklik Günü. Tesla, benzeri olmayan bir şirket ve gerçekten de bunu unutmanıza izin vermiyor. Dojo, Octovalve, yeni basınçla sarılmış elektrik motoru, 4680 hücre, Terafactory ve liste uzayıp gidiyor.
Biliyorsun ben de o kadar rahatladım ki, yıllar sonra nihayet Elon'a sorduğum soruya bir cevap aldım. Bu soru şuydu: Elon, makineyi yapan makine sende, peki robotu yapan robot nerede? Bir robot geleceğinin ne anlama gelebileceğini bir önceki makalemde/videomda kısaca ele almıştım, ancak şimdi Tesla Optimus Sub-Prime'ı duyurduğuna göre, ilk fırsatta bunun ayrı bir analizini de yapacağım.
Dojo akıllara durgunluk veriyor ve umarım bu analiz Tesla'nın yaptığı teknolojik ilerlemelerin boyutunu tam olarak anlamanıza yardımcı olmuştur.
CleanTechnica'nın özgünlüğünü takdir etmek ister misiniz? Bir CleanTechnica Üyesi, Destekleyen, Teknisyen veya Büyükelçi - veya bir patron Patreon.
Plato Ai. Web3 Yeniden Düşünüldü. Güçlendirilmiş Veri Zekası.
Erişmek için buraya tıklayın.
