Şirket, Codestral Mamba’yı 256 bin token’a kadar bağlam içi alma yeteneklerinde test etti; bu, OpenAI’nin testlerinde görülen sayının iki katı. GPT4o — ve 7B versiyonunun HumanEval, MBPP, Spider ve CruxE gibi çeşitli kıyaslama testlerinde açık kaynaklı modellerden daha iyi performans gösterdiğini buldu.
Yeni modelin daha büyük 22B parametreli versiyonu, CruxE kıyaslaması haricinde CodeLlama-34B’den önemli ölçüde daha iyi performans gösterdi.
7B sürümü Apache 2.0 lisansı altında kullanılabilirken, daha büyük 22B sürümü kendi kendine dağıtım için ticari lisans veya test amaçlı topluluk lisansı altında kullanılabilir.