Command R+ 这模型在东亚语系的表现真的可以。#ai#

Command R+ 在中文、日文和韩语的多数基准测试中优于Claude 3 Sonnet和Mistral Large，并且能与GPT 4-Turbo匹敌。

由于Mistral Large 没有官方支持这些语言，其表现自然不佳。

Command R+ 在这些语言中表现出色部分归功于高效的Token表示法，这不仅加快了推理速度，还降低了API成本。

为了测评东亚语系的能力他们没有使用mMMLU这类英语和西方中心的概念的测试集。

分别针对性的使用了日语的MT-Bench、韩语的CLIcK以及中文的CMMLU。

来源：http://t.cn/A6TNSjCc