昆仑万维:天工通用大模型推理才能逾越GPT-35和LLaMA2

时间: 2023-12-22 05:59:06 |   作者: 卧式

  自研的通用基座大模型天工大模型以80%的正确率锋芒毕露,大幅抢先GPT-3.5(57.1%)和LLaMA2-70B(56.8%),“标志着天工大模型的推理才能到达全球抢先,挨近GPT-4”。

  音讯说到,天工大模型不仅在推理性能上有着强壮的竞争力,在MMLU、C-EVAL、HumanEval等三项数据集测验中也相同表现出色。在MMLU数据集测验中,天工大模型以65%准确率逾越了LLaMA-65B的63.4%;在C-EVAL数据集测验中,天工大模型以65%准确率逾越了GPT3.5的54.4%。在HumanEval数据集测验中,天工大模型以37.2%的准确率逾越了PaLM-540B(26.2%)、LLaMA-65B(23.7%)、LLaMa2 -70B(30.5%)。


金达雅陶瓷:一线品牌金牌品质