Lao Huang yatırıma katıldı ve MIT Çinli kadın bilim insanları 200 milyon ABD doları topladı! 10.000 H100, 100 milyarın üzerinde parametreyle yapay zeka aracısını eğitiyor

Kaynak: Xinzhiyuan

Editör: Aeneas çok uykulu

Az önce Silikon Vadisi'nde başka bir yapay zeka tek boynuzlu atı doğdu!

Bu Çinli kadın bilim adamının kurduğu Imbue adlı şirket, yakın zamanda 200 milyon ABD Doları finansman aldı ve değerlemesi 1 milyar ABD Dolarına ulaştı.

Imbue aynı zamanda kurucuları kadın olan az sayıdaki tek boynuzlu atlardan biridir.

Sadece bu da değil, Imbue'nin ayrıca 10.000 adet Nvidia H100 grafik kartı var, dolayısıyla artık döviz konusunda endişelenmesine gerek yok.

Evet, doğru tahmin ettiniz, NVIDIA yine bu yapay zeka tek boynuzlu atına yatırım yaptı!

Nvidia'nın kıdemli bilim adamlarından Jim Fan da mutlu bir şekilde tebriklerini tweetledi: Geçen yıl NeurIPS'te Avalon ve MineDojo hakkında konuşmuştuk ve artık Avalon'un arkasındaki şirket bir tek boynuzlu at haline geldi!

Bu hikaye bize şunu söylüyor: Üst düzey bir konferansta tanıştığınız her etkileyici olmayan araştırmacıyı göz ardı etmeyin. Kim bilir, bir gün şirketlerine üst düzey finansman sağlanacak ve bir sonraki Sam Altman doğacaktır.

Para üretilmedi ama yüz milyonlar toplandı, böyle bir mucize ancak Silikon Vadisi'nde olabilir.

NVIDIA iyimserdir

Şu anda Imbue'nun eğittiği "ultra büyük ölçekli" büyük modelin 100 milyardan fazla parametresi var ve Imbue'nin elinde şu anda 10.000 NVIDIA H100 GPU bulunuyor.

Şirket, geçen sonbaharda Avalon açık kaynaklı eğitim ortamı dışında henüz herhangi bir ürün piyasaya sürmedi.

Imbue kurucu ortakları Kanjun Qiu ve Josh Albrecht

Ancak Imbue'nun bu turdaki finansman miktarı daha önce toplanan miktarın 10 katı.

Yatırım, milyarder Jed McCaleb tarafından kurulan, kâr amacı gütmeyen bir kuruluş olan Astera Institute tarafından yönetildi ve Nvidia, General Motors'un otonom sürüş şirketi Cruise'un CEO'su Kyle Vogt ve Notion kurucu ortağı Simon Last'in katılımıyla gerçekleşti.

Şimdi Imbue'nun toplam finansmanı 220 milyon dolara ulaştı ve bu da onu son aylarda en iyi finanse edilen girişimlerden biri haline getirdi. Önündeki birkaç şirket ise Cohere (435 milyon dolar), Adept (415 milyon dolar) ve AI21 Labs (283 milyon dolar).

Yatırımcılar arasında en dikkat çeken isim şüphesiz Nvidia.

Sadece bu yıl Nvidia, Adept, Coreweave, Cohere, Inflection, Runway, AI21 Labs ve Imbue dahil olmak üzere yedi AI tek boynuzlu atına yatırım yaptı.

Yapay zeka aracılarını hedefleme

Henüz başlangıç aşamasında olan, sadece 20 çalışanı olan ve henüz halka yönelik herhangi bir ürünü piyasaya sürmemiş olan start-up şirket, buna rağmen Silikon Vadisi'ndeki pek çok tanınmış yapay zeka yatırımcısının beğenisini kazandı.

Bunun nedeni, Imbue tarafından seçilen rotanın bir AI temel modeli değil, bir AI ajanı olmasıdır!

Büyük modellerin neden olduğu üretken yapay zeka patlamasının ardından pazar tamamen yeniden canlandı ve kendine güvenen yatırımcılar heyecanla bir sonraki sıcak noktayı arıyor.

Yapay zeka ajanları, birçok yapay zeka liderinin ve teknoloji devinin iyimser olduğu bir yön.

Bu yıl OpenAI'ye katılan tanınmış bir isim ve eski Tesla AI direktörü Karpathy bir keresinde şöyle demişti: AI ajanları, AI'nın geleceğini temsil ediyor!

Karpathy bir zamanlar AutoGPT'yi bir sonraki sınır olarak adlandırdı

Yapay zeka aracıları, en basit haliyle döngüler halinde çalışan, her yinelemede kendi kendini yönlendiren talimatlar ve eylemler üreten özerk aracılardır. Bu nedenle, konuşmaları yönlendirmek için insanlara güvenmiyorlar ve oldukça ölçeklenebilirler.

Karmaşık görevleri tamamlamak için insan tercihlerini simüle eden bir bilgi işlem sistemi olarak yapay zeka aracıları, şüphesiz büyük dil modellerinden daha yaratıcı bir yoldur.

Aslında bu yılın mart ve nisan aylarında yapay zeka ajanlarında bir patlama yaşandı ve sanki tesadüfen, sadece iki hafta içinde Stanford Westworld Town, BabyAGI, AutoGPT ve GPT-Engineer gibi birçok akıllı ajan piyasaya sürüldü. Ceset yağmurdan sonra bambu filizleri gibi ortaya çıkıyor.

Hatta bazı insanlar şöyle bir çağrı bile yaptı: Büyük dil modellerini devreye almayın, OpenAI'yi devreye sokamayız, ancak konu AI temsilcilerine gelince, onların bizden daha fazla deneyimi yok. Belki dikkatli olmazsanız yapay zeka temsilcisi yolunda "OpenAI" olabilirsiniz!

Hayır, Imbue geliyor.

Yatırımcılar: Yavaşça keşfedin, uygulamak için acele etmeyin

Ancak kurucu, Imbue'nun bazı ürünler geliştirmesine rağmen çoğunu üretime geçirmeyi planlamadığını söyledi.

Imbue, bu modellerin ve araçların gelecekte AGI'ye öncülük etmemize yardımcı olacak bir yol olmasını ve böylece insanların kendi özelleştirilmiş modellerini oluşturabilecekleri bir platforma sahip olmalarını umuyor.

Imbue'nun piyasaya karşı tutumu acil değil, finansmandan da anlaşılıyor——

Ana yatırımcı, henüz sıcakken yapay zeka projelerine koşan risk sermayesi şirketlerinden ziyade, teknoloji projelerine adanmış kar amacı gütmeyen bir kuruluş olan Astera Enstitüsü'dür.

Kurucular, fon toplama süreci sırasında risk sermayesi şirketleriyle toplantılardan kasıtlı olarak kaçındıklarını söyledi.

Bunun nedeni, onların görüşüne göre, Imbue'nun çalışmasının gerçek anlamda ticarileştirilmesinin birkaç yıl daha sürmesi olabilir. Risk sermayesi şirketleri bu kadar sabırlı olmayacak, kar amacı gütmeyen kuruluşlar ise ticarileştirme zaman çizelgeleri konusunda daha hoşgörülü olacak.

En büyük yatırımcı ve milyarder Jed McCaleb, Qiu ve Albrecht'in bir yapay zeka ajanı oluşturmasına ilişkin PPT'yi izledikten sonra çok memnun kaldığını ve bu nedenle elini sallayarak yatırım yapma kararı verdiğini söyledi.

Elbette bunun büyük bir kumar olduğunun da farkında: Araştırmayı bir sonraki aşamaya taşımak ve laboratuvar çalışmasını ticarileştirmek için, yalnızca GPU'lara yatırım yaparak çok fazla para harcanacak.

Qiu ve Albrecht ayrıca on yıl içinde PPT sonuçlarının muhtemelen insanların günlük uygulamaları haline geleceğinden ve muhtemelen on yıl içinde kullanılmayacağından oldukça emin.

Eğitim çıkarımı temel modeli

Imbue'nun resmi blogunda bunu açıkladılar:

Şu anda yapay zeka sistemleri, kullanıcılar adına basit görevleri tamamlama konusunda çok sınırlı yeteneklere sahip. Önemli engellerden biri de "akıl yürütme"dir.

Güçlü akıl yürütme yeteneğinin, yapay zeka ajanlarının etkili eylemler gerçekleştirebilmesi için gerekli bir koşul olduğu söylenebilir.

Bu ayrıca şu şekilde ayrılabilir: belirsizlikle başa çıkma yeteneği, yaklaşımın ne zaman değiştirileceğini bilme yeteneği, soru sorma ve yeni bilgi toplama yeteneği, senaryo geliştirme ve karar verme yeteneği, hipotez önerme ve hipotezlerden vazgeçme yeteneği ve gerçek dünyanın karmaşık ve öngörülemeyen doğasıyla başa çıkma yeteneği.

Temel modelleri "akıl yürütme yapay zeka aracıları" için uyarlamak, yalnızca Yüksek Lisans'ın sağladığı güçlü yeteneklerden yararlanmak değil, aynı zamanda bu modellerin nasıl eğitildiğini ve nasıl çalıştıklarını ayrıntılı ve pratik bir şekilde anlamak anlamına gelir.

Yani bir yandan model çıkarımını güçlendirmek için özel olarak kullanılan eğitim öncesi verilerin oluşturulması gerekirken, diğer yandan çıkarım sonuçlarının daha güvenilir hale getirilmesi için teknolojinin geliştirilmesi gerekmektedir.

Bunu yapmak için ekip tam kapsamlı bir yaklaşım benimsedi: temel modeli eğitmek, deneysel aracıları ve arayüzleri prototiplemek, sağlam araçlar ve altyapı oluşturmak ve modelin nasıl öğrendiğinin teorik temellerini anlamak.

- Modeli

Çıkarım kıyaslamalarında olağanüstü performans elde etmek için son derece büyük modelleri (>100 milyar parametre) eğitin ve optimize edin.

En son finansman turu, Imbue'ye diğer şirketlerin eşleşemeyeceği yetenekler kazandırdı: eğitim verilerinden mimariye ve çıkarım mekanizmalarına kadar her şeyin hızlı bir şekilde yinelenmesini sağlayabilen, yaklaşık 10.000 H100 ile donatılmış bir bilgi işlem kümesi.

-Ajan

Modelin üstüne Imbue, dahili kullanım için (esas olarak kodlama için) bir aracı prototipi tasarladı. Aynı zamanda güçlü ve güvenilir bir genel amaçlı ajan elde etmek için çeşitli diğer ajanları da deniyoruz.

-Arayüz

Günümüzün yapay zeka sohbet arayüzleri temel olarak skeuomorfiktir. Ekip, aracıların sağlamlığı, güveni ve işbirliğine ilişkin, etkileşim arayüzünü yeniden icat ederek çözülebilecek birçok temel sorun olduğuna inanıyor.

Ayrıca dünyayı anlayabilen yapay zeka ajanları, insanların bilgisayarlarla etkileşim biçimini yeniden düşünme fırsatı da sunarak bizi daha iyi destekleyen ve güçlendiren sistemler yaratıyor.

- alet

Harika araçlar yinelenen döngüleri hızlandırır.

Bu amaçla, ekip kendisi için araçlar oluşturmak için çok fazla çaba harcıyor: ister tür kontrolü ve iş parçacığı hatalarını düzeltmek için basit bir aracı prototipi olsun, ister aracıların ve modellerin üzerinde hata ayıklama ve görselleştirme arayüzleri olsun, ister daha karmaşık sistemler olsun (Örneğin, CARBS çoğu hiperparametre ayarlamasını ve ağ mimarisi aramasını otomatik olarak tamamlayabilir).

-Teori

Aracılara yönelik, uzun vadeli güvenliği korurken sağlam bir temel sağlayan bir model oluşturmak için derin öğrenme teorisi geliştirilmelidir.

Bu amaçla ekip, araştırmasını özellik öğrenme ve büyük dil modellerinin öğrenme sürecinin arkasındaki temel mekanizmayı anlamaya odaklıyor.

Şu anda ekip, kendi kendini denetleyen öğrenmenin teorik temeli ve sinir ağları gibi sistemlerde öğrenmenin temel kuralları hakkında birçok makale yayınladı.

Mantık yürütebilen ve kodlayabilen yapay zeka aracısı

Ancak herkesin kullanabileceği bir yapay zeka aracısı geliştirmeden önce ekip, ilk olarak kendi kullanım senaryoları üzerinde derinlemesine bir araştırma yaptı.

Aracılar için özel olarak tasarlanmış çıkarım modellerini sürekli olarak nasıl geliştirebileceğinizi ve aracıları daha güvenilir hale getirecek araçları nasıl oluşturabileceğinizi öğrenin.

Sonuç olarak, ilk grup aracı prototiplerinin büyük bir kısmı ekibin temel çalışması olan kodun etrafında dönüyordu.

Özel nedenler aşağıdaki gibidir:

-Kullanım buluşun olmazsa olmazıdır

Yapay zeka ajanlarının insanlarla istikrarlı bir şekilde çalışmasını sağlamanın en iyi yolu, günlük işlerde kullanılabilecek ve süreçteki çeşitli sorunları çözebilecek yapay zeka ajanları oluşturmaktır.

**- Kod, muhakeme becerilerini geliştirebilir **

İlk olarak, kod eğitimi modelin daha iyi akıl yürütmeyi öğrenmesine yardımcı olur. İkincisi, programlama soruları çok nesnel olduğundan (kod testi geçer veya geçmez), daha geniş muhakeme becerilerini test etmek için ideal bir platform sağlayarak ekiplerin temel sistemde yaptıkları iyileştirmelerin etkili olup olmadığını görmelerine olanak tanır.

- Kod eylem için önemlidir

Kod oluşturmak, aracıların bilgisayarlarla etkileşim kurmasının etkili bir yoludur. Daha fazla kodlama yeteneği, karmaşık görevleri başarıyla tamamlama olasılığı daha yüksek olan bir aracıya doğrudan dönüşür. Örneğin, bir tablodan bilgi çıkarmak için SQL sorguları yazabilen bir aracının, aynı bilgiyi doğrudan toplamaya çalışan bir aracıya göre kullanıcının ihtiyaçlarını karşılama olasılığı daha yüksektir.

-Stratejik öneme sahip

Sürekli iyileştirmelerle temsilciler daha fazla görevi üstlenebilir, araştırma ve mühendislik hızlandırılabilir. Bu şekilde, yalnızca yazılım sistemleri oluşturmaya yardımcı olmakla kalmaz, aynı zamanda gerçekten kullanışlı bir yapay zeka aracısının neye benzeyeceğini görmek için organizasyonel bir prototip oluşturmaya da yardımcı olur.

Şu anda ekibin bu "kod aracılarını" üretime geçirme planı yok. Ancak, bu araçları ve modelleri zaman içinde herkese açık hale getirerek herkesin kendi yapay zeka aracılarını oluşturmasına olanak sağlamayı bekliyorlar.

**Gerçek kişisel bilgisayarlar bize özgürlük, onur ve istediğimizi yapma yeteneği verir. **

Gerçekten yararlı bir yapay zeka aracısı aslında hedefleri anlayan, proaktif olarak iletişim kuran ve perde arkasında bizim için çalışan, fikirlerle uygulama arasındaki engelleri ortadan kaldıran bir bilgisayardır.

Bir ekrana bakmak yerine meraklarımızı keşfetmekte, evrenin yasalarını keşfetmekte, sanat şaheserleri yaratmakta, birbirimizi daha derinlemesine tanımakta veya sadece hayatın tadını çıkarmak için zaman ayırmakta özgürüz.

takım üyesi

Sadece 20 kişi kadar olmasına rağmen Imbue'nun ekip üyeleri çömelmiş kaplanlar, gizli ejderhalar olarak tanımlanabilir.

Kurucu ortak ve CEO Kanjun Qiu, lisans ve yüksek lisans derecelerini MIT'den aldı. Yapay zekaya ek olarak diğer üyelerin sinir bilimi ve plazma fiziği alanlarında da geçmişleri var.

Kurucular Kanjun Qiu ve Josh Albrecht, ekibin sahip olduğu arka plan bilgisinin genişliğinin bir avantaj olduğuna inanıyor.

Wall Street News'e göre Silikon Vadisi'ndeki birçok yatırımcı bu küçük ekibin gerçek bir yapay zeka araştırma laboratuvarını yönetip yönetemeyeceğinden şüphe ediyor.

Ancak Imbue'nun kurucularını tanıyanlara göre risk sermayesi, geçmişi iyi bilinen birkaç kurucuyu destekleme eğiliminde, dolayısıyla bu endişe önemli değil.

Bazı yatırımcılar ve danışmanlar

Referanslar: