Meta AI, Mobil Cihazlar İçin Daha Kompakt Bir Dil Modeli Geliştiriyor

Meta AI, Mobil Cihazlar İçin Daha Kompakt Bir Dil Modeli Geliştiriyor

Son dönemde akıllı telefon üreticileri cihazlarında yapay zekâ özellikleri kullanmak için büyük yatırımlar yapıyor. Meta da mobil cihazlar, tabletler gibi kapasitesi kısıtlı olan araçlar için daha kompakt bir dil modeli inşa ediyor. Bu modelle birlikte verimli yapay zekânın boyutları değişiyor.

Meta Reality Labs ekibi, PyTorch ve Meta AI Research (FAIR) çalışanlarından, 1 milyardan daha az parametrenin olduğu bir modeli geliştirmek için ortak bir ekip kuruldu. Bu model, GPT-4 gibi büyük modellerin binde biri kadar kalıyor. GPT-4, 1 trilyondan fazla parametreye sahip.

Yapay zekâ küçülüyor!

Konuyla ilgili olarak X üzerinden bir paylaşım yapan Meta’nın baş yapay zekâ bilimcisi Yann LeCun, araştırmanın detaylarını paylaştı. MobileLLM adlı dil modeli, akıllı telefonlar ve diğer cihazlara yapay zekâ getirecek.

Yapılan çalışmaya göre daha küçük modeller, genişlikten ziyade derinliği öne alarak model performansını arttırıyor. Ayrıca gelişmiş ağırlık paylaşım teknikleri kullanılarak depolama kısıtı olan cihazlarda verimliliği arttırabildiklerini ifade etti. Bu süreçte de gömülü paylaşım, gruplanmış kuyruk sorgu ve bloklu ağırlık paylaşımı ile dikkatleri çekti. 

Araştırmada dikkat çeken bir başka nokta ise sadece 350 milyon parametre ile MobileLLM’in 7 milyar parametrelik LLaMA-2 modeli ile başabaş bir performans sergiledi.

Kaynak: WebTekno.Com Read More

• About
• Latest Posts

Diyar21Haber

Diyar21 Haber Ajansı at Diyar21 News

Son Dakika Haber ,Enson Haber, Son Dakika Deprem Haberleri,Diyarbakir Yerel Haber ve Gazete Mansetleri. Diyarbakır Local News , Türkiye, Deprem Haberleri..

Latest posts by Diyar21Haber (see all)

• Malatya’nın Kale İlçesinde 3.6 Büyüklüğünde Deprem - 21/11/2024
• Gazeteci Sabaz: Dünyada en katı laiklik Türkiye’de uygulanıyor - 21/11/2024
• Acun Ilıcalı ve TV8’e Yasa Dışı Bahis Soruşturması! - 20/11/2024