Açık kaynak AI için çalışmıyor

Açıkçası, genel olarak açık kaynak ve açıklık hakkında nasıl konuştuğumuz hakkında bir şeyler yapmamız gerekiyor. Google ve Yahoo’ya seslendiğim için haklı olarak dövüldüğüm en az 2006’dan beri bu çok açık. açık kaynak üzerinde durmak için. Tim O’Reilly’nin yazdığı gibi O zamanlar, açık kaynağın bulut çağında, “paylaşma motivasyonlarından biri – programınızı birisinin çalıştırmasına izin vermek için kaynağın bir kopyasını verme zorunluluğu – gerçekten ortadan kalktı.” Aslında devam etti, “En büyük uygulamalar söz konusu olduğunda artık sadece gerekli değil, artık mümkün değil.”

Paylaşmanın bu imkansızlığı, son on yılda açık kaynak tanımını alt üst etti ve şimdi yapay zeka (AI) hakkında düşünme şeklimizi etkiliyor. Mike Loukides’in yakın zamanda belirttiği gibi. AI üzerinde işbirliği yapmak için hiç bu kadar önemli bir zaman olmamıştı, ancak bunu yapmanın daha zor olduğu bir zaman da olmamıştı. Loukides’in açıkladığı gibi, “Ölçekleri nedeniyle, büyük dil modellerinin yeniden üretilebilirlikle ilgili önemli bir sorunu vardır.”

2006’da bulutta olduğu gibi, AI’da en ilginç işleri yapan şirketler, geleneksel olarak beklediğimiz şekillerde “açık kaynak” bulmakta zorlanabilir. Öyle olsa bile, bu, anlamlı şekillerde hala açık olamayacakları anlamına gelmez.

Bu modeli dizüstü bilgisayarınızda çalıştırırken iyi şanslar

Loukides’e göre, birçok şirket yapay zekaya dahil olduğunu iddia etse de, sektörü ileriye taşıyan gerçekten sadece üç şirket var: Facebook, OpenAI ve Google. Ortak ne yanları var? Büyük ölçekli modelleri geniş ölçekte çalıştırma yeteneği. Başka bir deyişle, sizin ve benim yapamayacağımız bir şekilde yapay zeka yapıyorlar. Gizli olmaya çalışmıyorlar; onlar sadece sizin ve benim sahip olmadığımız bir altyapıya ve bu altyapıyı nasıl çalıştıracaklarına dair bilgiye sahipler.

Loukides, “Facebook’un OPT-175B’sinin kaynak kodunu indirebilirsiniz,” diye kabul ediyor, “ancak erişiminiz olan herhangi bir donanım üzerinde onu kendiniz eğitemezsiniz. Üniversiteler ve diğer araştırma kurumları için bile çok büyük. Yine de Facebook’un söylediğini yaptığına dair sözünü almak zorundasınız.” Buna rağmen Facebook’tan büyük duyuru “Bu temel yeni teknolojiyi anlamak için daha fazla topluluk katılımına izin vermek için Açık Önceden Eğitilmiş Transformatörü (OPT-175B) paylaşmak” olduğunu söyledi.

Bu kulağa harika geliyor, ancak Loukides’in ısrar ettiği gibi, OPT-175B “yeterli bilgi işlem kaynaklarına sahip olmalarına rağmen muhtemelen Google ve OpenAI tarafından yeniden üretilemez.” Neden? Niye? “OPT-175B, Facebook’un altyapısına (özel donanım dahil) Google’ın altyapısında yeniden üretilemeyecek kadar yakından bağlıdır.” Yine Facebook, OPT-175B ile yaptıklarını saklamaya çalışmıyor. Böyle bir altyapı inşa etmek gerçekten çok zor ve bunu yapacak parası ve bilgisi olanlar bile sonunda farklı bir şey inşa edecek.