Meta yakın zamanda şirketin açık kaynaklı yapay zeka (AI) kodlama modelinin en son güncellemesi olan Code Llama 70B’yi piyasaya sürdü. Sürümü duyuran Kaliforniya merkezli teknoloji grubu, modeli “Code Llama ailesindeki en büyük ve en iyi performans gösteren model” olarak nitelendirdi. Şirketin raporuna göre Code Llama 70B, HumanEval değerlendirmesinde yüzde 53 doğruluk oranı elde ederek, OpenAI’nin yüzde 67 puan alan GPT 4’e yakın yeteneklerinin altını çizdi. En yeni yapay zeka asistanı, şirketin mevcut kodlama modelleri Code Llama 7B, Code Llama 13B ve Code Llama 34B’ye katılıyor.
Meta’nın CEO’su Mark Zuckerberg duyuruldu Code Llama 70B’yi bir Facebook gönderisi aracılığıyla şöyle ifade etti: “Daha büyük bir 70B parametre modeli de dahil olmak üzere yeni ve geliştirilmiş bir Code Llama’yı açık kaynak olarak kullanıyoruz. Kod yazmak ve düzenlemek günümüzde yapay zeka modellerinin en önemli kullanımlarından biri olarak ortaya çıktı. [..] Buradaki ilerlemeden gurur duyuyorum ve bu ilerlemeleri Llama 3’e ve gelecekteki modellere de dahil etmeyi sabırsızlıkla bekliyorum.”
Code Llama 70B’nin üç versiyonu mevcuttur: Meta’nın bloguna göre temel model, Code LLama – Python ve Code Llama – Instruct postalamak. Python belirli bir programlama dili içindir ve Instruct’un doğal dil işleme (LNP) yetenekleri vardır; bu, nasıl kod yazacağınızı bilmeseniz bile bunu kullanabileceğiniz anlamına gelir.
Meta AI kodlama asistanı, hem kodları hem de doğal dil yanıtlarını oluşturma yeteneğine sahiptir; ikincisi, kodları açıklamak ve bunlarla ilgili sorguları yanıtlamak için önemlidir. 70B modeli, 1 trilyon jeton (yaklaşık 750 milyon kelime) kodlama ve kodla ilgili veriler üzerinde eğitilmiştir. Tüm LLama AI modelleri gibi Code Llama 70B de araştırma ve ticari amaçlar için ücretsizdir. Bu barındırılan Hugging Face’te bir kodlama deposu var.
Karşılaştırmalara gelince, şirket puanlarını doğrulukla yayınladı ve bunları tüm rakip kodlama odaklı AI modelleriyle karşılaştırdı. HumanEval kıyaslamasında 70B yüzde 53 puan alırken, Mostly Basic Python Programming (MBPP) kıyaslamasında ise yüzde 62,4 puan aldı. Her iki kıyaslamada da sırasıyla yüzde 48,1 ve yüzde 52,2 alan OpenAI’nin GPT 3,5’ini geride bıraktı. GPT4 gönderildi yalnızca HumanEval doğruluğu çevrimiçi puan aldı ve yüzde 67 netlik elde ederek Llama Code 70B parametresini oldukça sağlıklı bir farkla geride bıraktı.
Ağustos 2023’te Meta, Llama 2 temel modelini temel alan ve özellikle kodlama tabanlı veri kümeleri üzerinde eğitilen Code Llama’yı yayınladı. İstemler için hem kodları hem de doğal dili kabul eder ve her ikisinde de yanıtlar üretebilir. Code Llama kodları oluşturabilir, düzenleyebilir, analiz edebilir ve hata ayıklayabilir. Instruct sürümü aynı zamanda kullanıcıların doğal dildeki kodları anlamalarına da yardımcı olabilir.