跳到正文
硅脉动SiliconMai

阿里开源720亿参数通义千问模型

阿里开源720亿参数通义千问模型。阿里云通义千问720亿参数模型Qwen-72B今日宣布开源。

硅脉动
阿里巴巴资料图

阿里开源720亿参数通义千问模型。

阿里云通义千问720亿参数模型Qwen-72B今日宣布开源。

该模型基于3T tokens高质量数据训练,在10个权威基准测评中夺得开源模型最优成绩,在部分测评中超越闭源GPT-3.5和GPT-4。

代码理解方面,Qwen-72B在HumanEval、MBPP等测评中的表现大幅提升,代码能力有了质的飞跃。

据介绍,Qwen-72B可以处理最多32k的长文本输入,在长文本理解测试集LEval上取得了超越ChatGPT-3.5-16k的效果。

研发团队优化了Qwen-72B的指令遵循、工具使用等技能,使之能更好地被下游应用集成。

比如,Qwen-72B搭载了强大的系统指令(System Prompt)能力,用户只用一句提示词就可定制AI助手,要求大模型扮演某个角色或者执行特定的回复任务。

截至12月1日,从发布到规模部署通常还要经过开发适配、采购和运维环节。后续供货、使用量及付费客户数据会提供更直接的采用证据。

从12月1日之后的执行层面看,公司给出的性能比较需要保留测试条件和归属。不同模型、设备或数据集之间的结果不能脱离口径直接横向比较。