Cerebras'a Yapılan On Yıllık Bahis: "İnce İnce Yapay Zeka Çipleri" Nasdaq'ta Nasıl Listelendi?

Orijinal başlık: Cerebras ile geçen on yıla dair düşünceler
Orijinal yazar: Steve Vassallo
Derleyen: Peggy, BlockBeats

Editörün Notu: Cerebras, 14 Mayıs'ta CBRS sembolüyle Nasdaq'ta resmi olarak işlem görmeye başladı. Hisse senedi, işlem görmeye başladığı ilk gün yaklaşık %68 artışla kapanarak, 2026'dan bu yana en çok takip edilen yapay zeka donanımı halka arzlarından biri oldu.

Cerebras'ın ilk yatırımcılarından Steve Vassallo tarafından yazılan bu makale, SeaMicro'dan Cerebras'a uzanan 19 yıllık Andrew Feldman ortaklığını anlatıyor. Yüzeysel olarak, yatırım sözleşmesinden halka arza kadar bir girişim sermayesi öyküsünü anlatıyor gibi görünse de, gerçekte, ileri teknoloji donanım şirketinin, genel kanıya aykırı bir dönemde yapay zeka hesaplama mimarisinin temelden yeniden yapılandırılmasına nasıl yatırım yaptığını kronolojik olarak ele alıyor: yonga seviyesindeki çiplerden ve bellek bant genişliği darboğazlarından, güç kaynağı, ısı dağıtımı ve elektriksel süreklilik gibi bir dizi mühendislik zorluğuna kadar, Cerebras sadece tekil teknik zorluklarla değil, tüm modern bir hesaplama sisteminin yeniden icadıyla karşı karşıya kaldı.

En dikkat çekici olan şey, Cerebras'ın nihayetinde geleneksel çiplerden 58 kat daha büyük bir yonga levhası çipi üretmesi değil, şirketin en başından itibaren sektör normlarına aykırı bir yön seçmesidir: GPU'lar yapay zeka eğitimi için varsayılan çözüm haline geldiğinde, "yapay zeka için gerçekten tasarlanmış bir bilgisayarın ne olduğu"nu yeniden tanımlamaya çalışmıştır. Bu, yalnızca teknolojik yargı değil, aynı zamanda yatırımcı sabrı ve daha da önemlisi, yatırımcılar ve kurucu ekip arasında uzun vadeli, ticari olmayan bir güven ilişkisi gerektirir.

Günümüzün yapay zeka donanımı rekabetinde Cerebras'ın önemi, piyasaya bilgi işlem gücü devriminin sadece daha fazla GPU eklemekle ilgili olmadığını, aynı zamanda bilgi işlem mimarisinin kendisinin yeniden tasarlanmasından da kaynaklanabileceğini hatırlatmasında yatmaktadır.

Aşağıda orijinal metin yer almaktadır:

1 Nisan 2016 Cuma günü, Andrew Feldman'a arka bahçesindeki çitin üzerinden atlayıp Cerebras'a yapacağımız yatırımın şartlarını içeren belgeyi şahsen kendisine teslim edeceğimi bildirmek için bir e-posta gönderdim.

O gün 1 Nisan Şaka Günüydü ama ben şaka yapmıyordum.

Açıkçası, bu bir risk sermayesi şirketi için standart bir uygulama değildi. Ama o zamana kadar Andrew'u dokuz yıldır tanıyordum ve onunla bir sonraki şirketimiz hakkında neredeyse iki yıldır görüşüyordum. Şartları ve koşulları gözden geçirmek için harcanan bir cumartesi öğleden sonrası yüzünden bu anlaşmayı kaçırmam mümkün değildi.

Andrew ile ilk kez Ekim 2007'de tanıştım. O zamanlar, o ve Gary Lauterbach SeaMicro'yu yeni kurmuşlardı. O yatırım turuna katılmadım, ancak onlarla çok iyi anlaştım, özellikle de sorun çözmeye yönelik temel prensiplere dayalı yaklaşımlarını takdir ettim. O zamandan beri onları takip ediyorum.

Gerçekten değerli ilişkilerin gelişmesi zaman alır. Gerçekten değerli şirketler için de aynı şey geçerlidir. Bugün, dışarıdan bakıldığında, Cerebras halka arz edilmek üzere olan on yıllık bir şirket. Ancak benim görüşüme göre, bu, sonunda zil çalma anına ulaşmış on dokuz yıllık bir ilişki.

Ağustos 2019'da Andrew ve ben Stanford kampüsünde Hot Chips konferansına ev sahipliği yaptık. O sırada Cerebras, birinci nesil Wafer-Scale Engine'i piyasaya sürdü.

Derin ilişkiler ve mantıksız hırslar

AMD 2012'de SeaMicro'yu satın aldığında, Andrew'un büyük bir şirkette uzun süre kalmayacağını hissetmiştim. Güçlü bir rekabetçi ruhu ve asi bir kalbi vardı. 2014'ün başlarında ayrılma fırsatları aramaya başlamıştı ve biz de bundan sonra ne yapabileceğimizi görüşmek üzere sık sık bir araya gelmeye başladık.

O dönemde iki konuda fikir birliği yoktu: birincisi, yapay zekanın gerçekten faydalı hale geleceği; ikincisi ise GPU'ların yapay zeka için en uygun bilgi işlem mimarisi olmadığı.

İlk soruya gelince, tanıdığım birçok zeki insanın farklı görüşleri var. AlexNet'in 2012'de ortaya çıkmasından bu yana, araştırma camiasının bazı kesimleri evrimsel sinir ağlarıyla neredeyse mucizevi sonuçlar elde etmeye başladı. Ancak daha geniş yazılım endüstrisinde, yapay zeka hala bir pazarlama sloganı ile bilimsel bir araştırma projesi arasında bir yerde bulunuyor.

İkinci sorun olan donanım sorunu ise neredeyse hiç ciddi olarak ele alınmadı. GPU'lar, özellikle araştırmacıların CPU'lara kıyasla "o kadar da kötü olmadıkları" gerçeğini keşfetmeleri nedeniyle, sinir ağlarını eğitmek için varsayılan seçenek haline geldi. Yapay zeka iş yükleri için özel olarak yeni bir bilgi işlem sistemi kurmak, o dönemde dünya çapındaki araştırmacılar tarafından kullanılan ana akım mimariye meydan okumak anlamına gelir.

Ancak Andrew, Gary ve kurucu ortakları Sean, Michael ve JP farklı bir yön gördüler. Her birinin çip ve sistem alanlarında onlarca yıllık deneyimi vardı: Gary'nin geçmişi, 1980'lerde veri akışı ve sırasız yürütme alanındaki öncü çalışmalardan kaynaklanıyordu; Sean gelişmiş sunucu mimarisine odaklanmıştı; Michael yazılım ve derleyicilerle ilgileniyordu; ve JP donanım mühendisliğiyle yakından ilgileniyordu. Son derece nadir bir gruptular: bireysel olarak her biri olağanüstüydü; birlikte yetenekleri katlanarak artıyordu. Tamamen yeni bir bilgisayar türü hayal edebildiler.

Yapay zekanın potansiyelini gerçekten ortaya koyması durumunda, ortaya çıkacak pazar büyüklüğünün mevcut tüm bilişim biçimlerinin toplamını çok aşacağına inanıyorlar.

Ayrıca GPU'ların gerçek doğasını da gördüler: bunlar aslında grafik işleme için tasarlanmış çiplerdi ve yeni alanda yapay zeka eğitim araçları olarak geçici olarak kullanıldılar. Paralel işlemde CPU'lardan daha iyi olsalar da, hiç kimse yapay zeka iş yükleri için sıfırdan GPU benzeri bir mimari tasarlamazdı. Sinir ağlarının yeteneklerinin gerçek sınırlaması ham işlem gücü değil, bellek bant genişliğidir. Bu, yaratmak istedikleri çipin, izole çekirdekler içindeki matris çarpımını optimize etmeye değil, verilerin tüm hesaplama yapısı boyunca verimli bir şekilde nasıl aktığına odaklanacağı anlamına gelir.

Şirket içinde Cerebras'a yatırım yapmak, fikir birliğine varılmış bir karar olmaktan çok uzaktı. Ortaklarımın birçoğu, önceki yarı iletken yatırım turunun neredeyse tamamen zararla sonuçlandığına bizzat şahit olmuş ve endişelerini açıkça dile getirmişlerdi. Ancak nihayetinde, ekip olarak bir fikir birliğine vardık. Nisan 2016'daki o hafta sonu, Andrew'a şunu açıkça belirttik: Ona bir yatırım teklifi sunan ilk yatırımcı olmak istiyorduk.

Birkaç hafta sonra Andrew, Gary, Sean, Michael ve JP, 250 Middlefield'in ikinci katındaki EIR ofisimize taşındılar. O zamanki ofis müdürü tarafından çizilen kat planı hâlâ bende duruyor. O planda, Cerebras, Vakfın kurucularından birinin yanında ve daha sonra Moveworks'ü kuran Bhavin Shah'tan sadece birkaç kapı ötede yer alıyor. Yeni kurulan şirketlerin büyümesi için mükemmel bir kattı.

Cerebras'ın ilk genel merkezi, 250 Middlefield adresindeki eski ofisimizin ikinci katında bulunuyordu.

Hangi kuralların esnetilebileceğini ve hangi kuralların mutlaka çiğnenmesi gerektiğini bilin.

Cerebras'tan önce, tarihteki en büyük bilgi işlem çipi yaklaşık 840 milimetre kareydi, yani kabaca bir posta pulu büyüklüğündeydi. Ancak Cerebras'ın çipi 46.000 milimetre kare ölçülerinde olup, 58 kat daha büyüktür.

Yonga levhası seviyesinde çipler seçmek, bunlarla birlikte gelen tüm tasarım zorluklarını da seçmek anlamına gelir. Yaklaşık 80 yıllık bilgisayar tarihinde, hiç kimse bunu gerçekten başaramadı. Bu aynı zamanda, hiç kimsenin bu sorunları sistematik olarak çözemediği anlamına da gelir: Bu kadar büyük bir çipe nasıl güç verilir? Nasıl soğutulur? On binlerce bağlantı noktası arasında elektriksel süreklilik nasıl sağlanır?

Yonga levhası seviyesinde hesaplama elde etmek için Cerebras, modern hesaplamanın neredeyse her yönünü aynı anda yeniden icat etmek zorunda kaldı: yarı iletkenler, sistemler, veri yapıları, yazılım ve algoritmalar. Bu alanların her biri kendi başına birer girişim niteliğindeydi. Andrew ve ekibi, en zorlu teknik sorunları önce ele almayı seçti. Yoğun ve neredeyse yorulmak bilmeyen çabaları sayesinde, bu sorunlar birer birer aşıldı.

Altı ila sekiz haftada bir yönetim kurulu toplantısı yapıyoruz. Bize son toplantıdan bu yana denedikleri şeyleri sunuyorlar: yeni bir sistem tasarım varyantı, yeni bir güç kaynağı şeması veya termal yönetimde yapılan bir iyileştirme. Sistemik zorluklarla her açıdan tekrar tekrar yüzleşerek, fikirlerini açıkça ifade etme konusunda zorlu bir yetenek geliştirdiler. İşlerin nerede yanlış gittiğini ve bundan sonra ne denemeyi planladıklarını açıklıyorlar.

Sorular soruyoruz, ardından ekiple yakın iş birliği içinde çalışarak, yeni atılımlar bulmalarına yardımcı olmak için gerekli insanları, kaynakları ve ilişkileri harekete geçiriyoruz. Altı ila sekiz hafta sonra tekrar buluştuğumuzda, hikaye başka bir teknik sorunla kendini tekrar ediyor: keşfedilecek bir başka sınır daha. Her çözüm, çözülmesi gereken bir sonraki sorunu ortaya çıkarıyor.

İlk prototip yonga levhası, ilk kez çalıştırıldığında duman çıkarmaya başladı. Ekip buna "termal olay" adını verdi; bu terim, yönetim kurulunu veya ev sahibini korkutmak istemediğinizde genellikle yangını tanımlamak için kullanılır.

Kısmen merakımdan, kısmen de rakamlar inanılmaz derecede yüksek göründüğü için, milimetre kare başına güç tüketimini hesaplıyordum. Bu yüzden, eski adı Failure Analysis olan bir arıza analizi firması olan Exponent'ten mühendisler getirdik. Güç tüketimi rakamlarının gerçekten de göründüğü kadar abartılı olduğunu doğruladılar ve termodinamiğin ikinci yasasını sorgulamayı gerektirmeyen bir dizi çözüm düşünmemize yardımcı oldular. Sonuçta, Andrew'un tartışmayacak kadar zeki olduğu bir yasa bu.

Bir mühendisin disiplini, hangi kuralların çiğnenebileceğini, hangilerinin esnetilebileceğini ve hangilerine saygı duyulması gerektiğini bilmekte yatar. Andrew ve ekibi, bunlar arasında ayrım yapma konusunda kanıtlanmış bir yeteneğe sahipler. Geleneklere meydan okuduklarını (ki bunu doğal olarak yapmak isterler) ve fizik yasalarına meydan okuduklarını (ki bunu yapmamaları gerekir) bilirler.

Son teknoloji geliştirirken başarısızlık kaçınılmazdır. Başarısızlığın üstesinden gelmenin tek yolu disiplin, azim ve en önemlisi güvendir: göreve güven, birbirinize güven ve ilk prototip kendi kendini imha ettiğinde bile ertesi sabah bir sonraki yinelemeye başlamak için laboratuvarda olacağınıza olan güven.

Bu çalışmanın kısa vadeli bir versiyonu yok. Sadece uzun vadeli bir versiyonu var: tamamlanmamış çözümlerin ve sabırlı açıklamaların ortasında, her zaman odada kalmak. Bu şekilde, nihai başarısına tanık olacaksınız.

O an Ağustos 2019'da yaşandı. Andrew, Sean ve ekipleri laboratuvarda, tasarladıkları yepyeni bir bilgisayarın ilk çalışmasını izliyorlardı. Acemi bir göz için, ilginç bir şey yapıyor gibi görünmüyordu. Andrew'a göre, muhtemelen boyanın kurumasını izlemek kadar sıkıcıydı. Ama bu sefer farklıydı: Daha önce hiçbir "boya" kutusu gerçekten kurumamıştı. 30 dakika boyunca birlikte orada durdular, sonra işlerine geri döndüler.

Kimlerle birlikte çalıştığınız çok önemli.

Bazı insanlar çözebileceklerini bildikleri sorunları seçerler. Andrew'un sorun seçme kriteri ise çözmeye değer olduğuna inandığı sorunlardır. Aşamalı yinelemeler onu heyecanlandırmıyor; 1000 katlık sıçramalar istiyor. İlk günden itibaren Cerebras'ı nesiller boyu sürecek, benzersiz bir şirket haline getirmek istedi.

Bu azim kısmen kişiliğinden kaynaklanıyor. Andrew bunu bilgisayar mimarlarının bir "belirtisi" olarak tanımlıyor: bir fikre on yıllarca takılıp kalmak. Ama bence bu daha genel olarak kurucuların bir "belirtisi". Bir sorunla karşılaştığında önce kendine şunu soruyor: Bir atılım sağlayacak bir şey yaratabilir miyim? Sonra da şunu soruyor: Başarılı olursam, kimse umursar mı? Her iki sorunun da cevabı evet ise, hayatının sonraki on yılını buna adayacaktır.

Bu itici gücün bir diğer parçası da yetiştirilme tarzından kaynaklanıyordu. Andrew, tıpkı çoğu çocuğun televizyon izleyerek büyüdüğü gibi, dâhilerle çevrili bir ortamda büyüdü. Babası, evrimsel biyoloji alanında öncü bir profesördü ve her pazar altı kişiyle birlikte çiftler tenis oynardı. Bu altı kişiden üçü daha sonra Nobel Ödülü, biri ise Fields Madalyası kazandı.

Andrew'a göre, bu devler ona fizik, matematik ve moleküler biyoloji alanındaki çalışmalarını bir çocuğun anlayabileceği bir dilde sabırla açıklıyorlardı. Bu, ona gerçek zekanın neye benzediği konusunda derin bir izlenim bıraktı; ve annesinin dediği gibi, zeki olmanın kaba olmak anlamına gelmediğini de anladı.

Zamanla bunun Andrew'un temel özelliklerinden biri olduğunu, isyankar hırsı ve gerçekten değerli sorunlara yönelik neredeyse ışığa duyarlı içgüdüsü kadar önemli olduğunu fark ettim. Tanıştığı en olağanüstü insanların genellikle son derece nazik olduklarına da kesinlikle inanıyordu.

Bu inanç, ekibinin son derece zorlu görevleri başarmak için nasıl bir araya geldiğini şekillendirdi. Cerebras'ın ilk 30 çalışanının tamamı onunla birlikte çalışmıştı; bazıları 1996'dan beri onunla birlikteydi. Bugün Cerebras'ın yaklaşık 700 çalışanı var ve bunların yaklaşık 100'ü çeşitli şirketlerde onunla birlikte çalışmaya devam etti.

Ağustos 2022'de Cerebras'ın kurucu ekibi Bilgisayar Tarihi Müzesi'ni ziyaret etti. Soldan sağa: Sean Lie, Gary Lauterbach, Michael James, JP Fricker ve Andrew Feldman.

Önemli olan, nezaket ve rekabetçiliğin birbirine zıt olmamasıdır. Andrew kazanmaya son derece heveslidir. Kendisinin, Golyat'a karşı savaşan profesyonel bir Davut versiyonu olduğunu söylemeyi sever. Golyat yavaş ve her zaman cepheden gelen bir saldırıya karşı tetiktedir, bu da diğer tüm taktiklere alan bırakır. Davut'un avantajı, Golyat'ın yapamayacağı şekillerde ve yerlerde ortaya çıkmasında yatmaktadır.

SeaMicro'da Andrew'un Japonya'daki en büyük kanal ortağı NetOne idi. NetOne'ın ana tedarikçisi, ortaklarını özel jetler ve yatlarla ağırlayan Cisco'ydu; bu varlıklar Palo Alto'daki çoğu evden daha değerliydi. Çok daha mütevazı bir bütçeye sahip olan Andrew, NetOne'ın CEO'sunu arka bahçesindeki bir barbeküye davet etti. Daha sonra CEO, Cisco ile on yıllardır iş yaptığını ancak hiç kimsenin evine davet edilmediğini söyledi. Görünüşte küçük ama inanılmaz derecede kişisel olan bu jest –Goliath'ın asla aklına gelmeyecek bir şey– ilişkilerini sağlamlaştırdı.

İlk ön anlaşmadan halka arza kadar

Bu sabah Andrew, Nasdaq'ta açılış zilini çaldı. Yanında durdum. Her şey 250 Middlefield ofisimizde başladığından beri on yıl ve 2600 mil geçti.

Bugün, Andrew'un o zamanlar yaptığı gibi, gece saat 3'te beyaz tahtalara çizimler yapan, çözülmemiş teknik sorunlarla boğuşan nadir girişimciler hala var. Onlar da aynı azimli kararlılığı ve isyankar ruhu paylaşıyorlar. Onlar, yanlarında savaşmaya istekli gerçek bir ortak bulmaya çalışıyorlar: İlk prototip çalışmadığında sorunu çözmeye girişip, sonunda çalışır hale gelene kadar yanında kalacak biri.

İşte tam olarak desteklemek istediğim kurucu tipi bu: çözmeye değer sorunları seçiyorlar, mevcut durumdan 1000 kat daha iyi çözümler hayal ediyorlar ve yol boyunca kaçınılmaz zorlukların üstesinden gelerek sürekli iyileştirme ve azim gösteriyorlar.

Andrew, Gary, Sean, Michael ve JP gibi kurucular için, cumartesi öğleden sonra arka bahçe çitinden atlayıp, onlara yatırım şartnamesini bizzat elden teslim etmekten memnuniyet duyardım.