A dimly lit data center with rows of servers
Yapay Zeka

Nvidia destekli Reflection, GPU sunucularını kilitledi!

Startup, veri hassasiyeti olan kurumlar için bir “AI fabrikası” önerirken Nebius ve SpaceX ile büyük Nvidia sunucu kiralama anlaşmaları imzaladı.

Yazan: Elliot Marsh5 dk okuma

Nvidia destekli girişim Reflection, yakında güçlü bir açık ağırlıklı AI modeli piyasaya sürmeye hazırlanıyor ve Nebius ile SpaceX ile yaptığı büyük kiralama anlaşmaları aracılığıyla Nvidia AI sunucu kapasitesini güvence altına alıyor. Bu işbirliği, kendi verileri üzerinde kapalı model API'lerine tamamen bağımlı olmadan özel AI yığınları çalıştırmak isteyen kurumları hedefliyor.

Reflection, Nvidia sunucu kapasitesini kilitleyerek açık ağı başlatmaya yaklaşıyor.

Reflection, Nvidia destekli bir girişim, yakında "güçlü" bir açık ağırlıklı AI sistemi piyasaya sürmeye hazırlanıyor ve bunu, Nvidia GPU'ları ile birleştirildiğinde büyük ABD laboratuvarlarının kapalı sınır modellerini kullanmanın daha ucuz bir alternatifi olarak konumlandırıyor.

Burada "açık ağırlıklı" terimi, modelin ağırlıklarının indirilebilir ve dahili olarak çalıştırılabilir veya özelleştirilebilir olduğu anlamına geliyor, yalnızca bir barındırılan hizmet aracılığıyla erişilebilir olmasından ziyade.API.

Reflection'ın gerçek dağıtım hacmi için plan yaptığını gösteren şey pazarlama değil, hesaplama. Son haftalarda şirket, Nvidia AI sunucularını kiralamak için Nebius ve SpaceX ile "büyük" anlaşmalar imzaladı ve böylece müşteriler çevrimiçi olduğunda eğitim, ince ayar ve çıkarım için yönlendirebileceği GPU kapasitesini etkili bir şekilde rezerve etti. Şartlar açıklanmadı ve bir Reflection sözcüsü yorum yapmayı reddetti.

Kaynaklar, ilk Reflection modelinin lansmanda en son teknolojiye sahip ABD kapalı modellerinin arkasında kalmasını, ancak en iyi Çin açık ağırlık modelleriyle rekabetçi olmasını bekliyor. Bu orta zemin önemlidir çünkü modelin operasyonel olarak faydalı olabilmesi için öncü olması gerekmez.

Eğer "yeterince yetenekli" ise, kurumlar bunu yüksek kaliteli iç verilerle birleştirerek daha pahalı öncü sistemlerle rekabet eden özel sistemler oluşturabilirler; bu sistemler daha dar, alan spesifik iş akışlarında kullanılabilir.

“AI Fabrikası” Sunumu: Yerelleştirilmiş Modeller, Özel Veriler ve Ticaret Firmalarının Neden Önem Verdiği

Reflection'ın temel ürün çerçevesi "AI fabrikasıdır", kurumların yerelleştirilmiş AI ekosistemleri oluşturması için paketlenmiş bir yaklaşımdır. Mekanik olarak, iş akışı basittir: bir kurum, kendi özel verilerini alır, Reflection'ın modellerini uygular ve kontrol ettiği özel hesaplama üzerinde yığınını çalıştırır. Buradaki amaç sadece özelleştirme değildir. Hassas verileri kurumun sınırları içinde tutarken modern model yeteneklerinden yararlanmaktır.

Bu yüzdenhedge fonlar ve ticaret firmaları sunumda yer alıyor. Bu dükkanlar zaten “yüksek korumalı verilere” sahip ve birçokları, kurumsal şartlar altında bile, bu verileri üçüncü taraf API'lerine göndermeye yapısal olarak alerjik. Açık ağırlık modeli dağıtım yüzeyini değiştiriyor.

Bir firmanın, bir satıcının barındırdığı modele komut ve bağlam göndermek yerine, içsel olarak çıkarım yapabilmesi, özel veriler üzerinde ince ayar yapabilmesi ve iç uyumla eşleşecek şekilde tam boru hattını, günlükleme ve erişim kontrolleri dahil, düzenleyebilmesi mümkün.

Hesaplama kilidi mekanizmanın diğer yarısıdır. Açık ağırlık tek başına, özellikle gecikmeye duyarlı çıkarım veya tekrar eden ince ayar döngüleri için, ölçekli olarak GPU'ları güvenilir bir şekilde tedarik edemiyorsanız darboğazı çözmez. Nebius ve SpaceX aracılığıyla Nvidia AI sunucuları kiralayarak, Reflection, kurumların gerçekten hissettiği iki kısıtlamayı bir araya getirmeye çalışıyor: model erişimi ve hesaplama erişimi. Bu kombinasyon, bir model sunumundan çok bir “altyapı ürünü”ne daha yakındır.

Reflection, egemen bir AI bağlamında AI fabrikası konseptini test etmeye başladı ve Güney Kore'deki Shinsegae Grubu ile egemen bir AI fabrikası ortaklığını duyurdu.

Bu çerçevede “Egemen AI”, verilerin ve kontrolün güvenlik ve yönetim nedenleriyle belirli bir ülke veya kurum içinde tutulmasıyla ilgilidir; bu da Batılı işletmelerin ve devlet kullanıcılarının yüksek yetenekli Çin açık ağırlık modellerini dağıtmada neden isteksiz olduklarıyla temiz bir şekilde örtüşmektedir.

Karşılaştırmalar, Lisanslama ve Batılı Açık-Ağırlık Dalgası: Yayın İçin Neleri İzlemeli

Hemen bilinmeyen, karşılaştırma terimlerinde “rekabetçi”nin ne anlama geldiğidir. Reflection, pazara kendisini kesin olarak önde gelen Çin açık ağırlık modelleri veya en iyi ABD kapalı sınır modelleri ile karşılaştırmasına izin verecek teknik karşılaştırmalar, parametre sayıları, donanım gereksinimleri veya üçüncü taraf değerlendirmeleri yayınlamadı.

Lisanslama, kurumsal benimseme için ikinci engelleyici unsurdur. “Açık ağırlık” hala pratikte önemli olan kısıtlamalarla gelebilir; bunlar arasında ticari kullanım, yeniden dağıtım ve ince ayar hakları üzerindeki sınırlamalar bulunmaktadır. Kurumların içsel olarak dağıtım yapmak istemesi durumunda, izin veren ticari lisans ile daha kısıtlayıcı bir araştırma tarzı lisans arasındaki fark, bir pilot ile üretim arasındaki farktır.

Hesaplama, AI fabrikası sunumunun gerçek olup olmadığını belirleyecek üçüncü değişkendir. Nebius ve SpaceX sunucu kiralama anlaşmaları “büyük” olarak tanımlanıyor, ancak açıklanan kapasite, süre veya fiyatlandırma olmadan, bunları desteklenen çıkarım verimliliği veya eğitim ölçeğine çevirmek zordur.

Bu detaylar, Reflection'ın GPU'lar için tekrarlanabilir bir tedarik kanalı mı inşa ettiğini yoksa sadece lansmandan önce kıt kapasiteyi mi kapmaya çalıştığını da gösterecektir.

Reflection'ın yayınlanması, Batılı oyunculardan diğer açık ağırlık model yayınlarıyla aynı ayda gerçekleşmesi bekleniyor ve bu da fiyatlandırma, lisanslama ve kurumsal paketleme üzerinde rekabetçi baskı ekliyor. Eğer birden fazla güvenilir Batılı açık ağırlık seçeneği dar bir zaman diliminde gelirse, ayırt edici özellik, ham model kalitesinden dağıtım ergonomisine, destek ve garantili hesaplamaya kayabilir.

Benim Görüşüm: Hesaplama Erişimi Gerçek Çit—Model Özellikleri Aksi Kanıtlanana Kadar

Kuruluşlar için Yansımanın önemli olup olmadığını belirleyen kısım "açık-ağırlık" etiketi değil, şirketin gerçek kısıtlar altında kullanılabilir bir yığın sunup sunamayacağıdır: iç dağıtım için izin veren bir lisans ve beklemeden ince ayar ve çıkarım destekleyecek kadar Nvidia kapasitesi. Nebius ve SpaceX kiralamaları, açık-ağırlığı gerçekten satın alabilecek bir şeye dönüştürme girişimi gibi görünüyor.

Önemli olan eşik basittir: eğer kıstaslar ve üçüncü taraf değerlendirmeleri modelin kaynakların beklediği yerde olduğunu gösteriyorsa ve lisans kurumsal dostuysa, Yansıma, öncü olmayan bir sistem olsa bile, Çin dışı açık-ağırlık sistemleri isteyen Batılı mağazalardan talep kazanabilir.

Eğer model bu aralığın altında performans gösterirse veya lisans ve hesaplama şartları çok sıkıysa, AI fabrikası sunumu "sadece başka bir model dosyası" haline geri döner.

Kaynaklar