Graves
- 9 Eki 2024
- 10,528 Mesaj
- TIM Görevleri
- 2
Aktiflik
Seviye
Deneyim
Xiaomi’den Yapay Zekâ İçin Dev Hamle: Xring O100 Saniyede 330 Token İşliyor!
Xiaomi, kendi çip teknolojilerini geliştirme çalışmalarını yapay zekâ tarafında da hızlandırıyor. Şirketin yeni çözümü Xring O100 AI, özellikle büyük dil modellerini cihaz üzerinde çalıştırmaya odaklanırken, açıklanan performans değerleri mobil yapay zekâ açısından dikkat çekici bir tablo ortaya koyuyor.
Yeni hızlandırıcı, Xiaomi’nin Xring ailesindeki yapay zekâ odaklı çözümlerden biri olarak konumlandırılıyor. Şirketin açıkladığı verilere göre O100, yerel yapay zekâ çıkarımında saniyede 330 token seviyesine ulaşabiliyor. Çipin öne çıkan bir diğer özelliği ise 1,22 TB/s bellek bant genişliği.
Xiaomi O100'de Paketleme Teknolojisine Odaklandı
Xiaomi’nin kurucusu ve CEO’su Lei Jun tarafından tanıtılan Xring O100’ün tasarımında yalnızca işlem gücüne değil, verinin işlem birimleri ile bellek arasında taşınma hızına da odaklanılmış durumda. Şirket, bu noktada gelişmiş 3D wafer-level stacking yaklaşımını öne çıkarıyor.
6 nm üretim teknolojisi temelinde hazırlanan yapıda işlem mantığı ile yüksek hızlı DRAM bileşenleri üst üste konumlandırılıyor. Xiaomi, wafer-on-wafer ve hibrit bonding teknolojilerinin kullanıldığı bu mimarinin, bileşenler arasındaki bağlantıları mümkün olduğunca kısaltmayı amaçladığını belirtiyor.
1,22 TB/s Bant Genişliği Neden Önemli?
Yapay zekâ modellerinin performansında yalnızca NPU’nun hesaplama kapasitesi belirleyici olmuyor. Özellikle büyük dil modellerinde devasa miktardaki verinin bellekten işlem birimlerine hızlı şekilde aktarılması gerekiyor. Bu aktarım yeterince hızlı gerçekleşmediğinde güçlü işlem birimleri bile beklemek zorunda kalabiliyor.
Xiaomi’nin O100 ile çözmeye çalıştığı temel problemlerden biri tam olarak bu bellek darboğazı. Şirket, geliştirdiği mimarinin geleneksel akıllı telefon çözümlerine kıyasla bellek bant genişliğini 16 kata kadar artırabildiğini ifade ediyor. Sonuç olarak 1,22 TB/s seviyesindeki bant genişliği, yerel yapay zekâ görevleri için çipin en önemli özelliklerinden biri haline geliyor.
330 Token/Saniye Performans İddiası
Xiaomi’nin açıkladığı rakamlardaki en dikkat çekici detay ise 330 token/saniye yerel çıkarım performansı. Bu değer, büyük dil modellerinin bulut sunucularına gönderilmeden doğrudan cihaz üzerinde çalıştırılması hedefinin ne kadar önemsendiğini gösteriyor.
O100’ün mimarisinde farklı yapay zekâ çıkarım aşamalarına göre optimize edilen çok çekirdekli bir NPU bulunuyor. Dinamik veri yönlendirme yeteneği de çipin uzun süreli yapay zekâ yükleri altında daha verimli çalışmasına yardımcı olacak şekilde tasarlanmış.
Telefonlardan Robotlara Kadar Kullanılabilir
Xring O100 yalnızca akıllı telefonlar için geliştirilen bir çözüm olarak düşünülmüyor. Xiaomi daha önce O100’ü tablet benzeri prototiplerde ve Xiaomi AI Cube olarak gösterilen mini PC formundaki sistemlerde sergilemişti. Bu çalışmalar, çipin farklı cihaz sınıflarına uyarlanabileceğine işaret ediyor.
Şirketin uzun vadeli planları arasında akıllı telefon ve tabletlerin yanı sıra robotlar ve diğer uç cihazlar da bulunuyor. Böylece yapay zekâ işlemlerinin mümkün olduğunca cihaz üzerinde gerçekleştirilmesi ve bulut bağlantısına olan ihtiyacın azaltılması hedefleniyor.
Ticari Ürünler İçin Hedef 2027
Xring O100 şu an için Xiaomi’nin yapay zekâ çip geliştirme çalışmalarının önemli bir parçası konumunda. Şirketin açıkladığı takvime göre teknolojinin ticari ürünlerde daha geniş şekilde kullanılmaya başlaması için 2027 yılı bekleniyor.
Eğer açıklanan performans değerleri gerçek kullanım senaryolarında da korunabilirse O100, Xiaomi’nin cihaz üzerinde çalışan yapay zekâ stratejisinde önemli bir kilometre taşı olabilir. Özellikle büyük dil modellerinin doğrudan telefon, tablet veya robot gibi cihazlarda çalıştırılması, gelecekte yapay zekâ deneyiminin buluttan cihaza doğru daha fazla kaymasına neden olabilir.
Özetle: Xring O100 AI; 6 nm 3D paketleme yaklaşımı, 1,22 TB/s bellek bant genişliği ve Xiaomi’nin açıkladığı 330 token/saniye yerel çıkarım performansıyla dikkat çekiyor. Çipin ticari ürünlerdeki asıl sınavı ise 2027 yılında başlayacak.

