阿里云宣布通义千问 720 亿参数模型开源

2023-12-01 10:39IT之家 - 问舟

IT之家 12 月 1 日消息,阿里云宣布开源通义千问 720 亿参数模型 Qwen-72B、18 亿参数模型 Qwen-1.8B 及音频大模型 Qwen-Audio,目前已上线阿里魔搭社区。

本次开源的模型中除预训练模型外,还同步推出了对应的对话模型,面向 72B、1.8B 对话模型提供了 4bit / 8bit 量化版模型,便于开发者们推理训练。

IT之家注:阿里云此前已经开源了 70 亿参数模型 Qwen-7B 以及 140 亿参数模型 Qwen-14B。

据介绍,Qwen-72B 搭载了强大的系统指令(System Prompt)能力,用户只用一句提示词就可定制自己的 AI 助手,要求大模型扮演某个角色,或者执行特定的回复任务。

官方表示,Qwen-72B 在 10 个权威基准测评创下开源模型最优成绩,成为业界最强开源大模型,性能超越开源标杆 Llama 2-70B 和大部分商用闭源模型。

未来,企业级、科研级的高性能应用,也有了开源大模型这一选项。通义千问还开源了 18 亿参数模型 Qwen-1.8B 和音频大模型 Qwen-Audio。

至此,通义千问共开源 18 亿、70 亿、140 亿、720 亿参数的 4 款大语言模型,以及视觉理解、音频理解两款多模态大模型,实现“全尺寸、全模态”开源。

IT之家附模型链接:

通义千问-72B-预训练:

  • https://modelscope.cn/models/qwen/Qwen-72B

通义千问-72B-Chat:

  • https://modelscope.cn/models/qwen/Qwen-72B-Chat

通义千问-72B-Chat-Int8:

  • https://www.modelscope.cn/models/qwen/Qwen-72B-Chat-Int8

通义千问-72B-Chat-Int4:

  • https://www.modelscope.cn/models/qwen/Qwen-72B-Chat-Int4

通义千问-1.8B-预训练:

  • https://modelscope.cn/models/qwen/Qwen-1_8B

通义千问-1.8B-Chat:

  • https://modelscope.cn/models/qwen/Qwen-1_8B-Chat

通义千问-1_8B-Chat-Int8:

  • https://www.modelscope.cn/models/qwen/Qwen-1_8B-Chat-Int8

通义千问-1_8B-Chat-Int4:

  • https://www.modelscope.cn/models/qwen/Qwen-1_8B-Chat-Int4

通义千问-Audio-预训练:

  • https://modelscope.cn/models/qwen/Qwen-Audio

通义千问-Audio-Chat:

  • https://modelscope.cn/models/qwen/Qwen-Audio-Chat

模型下载(以通义千问-72B-Chat-Int4 为例):

from modelscope import snapshot_downloadmodel_dir = snapshot_download("qwen/Qwen-72B-Chat-Int4")

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

文章价值:
人打分
有价值还可以无价值
置顶评论
    热门评论
      文章发布时间太久,仅显示热门评论
      全部评论
      请登录后查看评论
        取消发送
        软媒旗下人气应用

        如点击保存海报无效,请长按图片进行保存分享