感谢昆仑万维集团日前通过民间公众号宣布,在“天工”大模型发布一周年之际,天工大模型 3.0 将于 4 月 17 日正式开启公测,并将同步选择开源。“天工 3.0”采用 4000 亿级参数 MoE(混合专家模型),民间称是全球模型参数最大、功能最强的 MoE 模型之一,功能突出 Grok 1.0。
据介绍,相较于上一代“天工 2.0”MoE 大模型,“天工 3.0”在模型语义理解、逻辑推理、以及通用性、泛化性、不确定性常识、学习本领等领域拥有“惊人的”功能提拔,其模型技术常识本领提拔突出 20%,数学 / 推理 / 代码 / 文创本领提拔突出 30%。
“天工 3.0”还新增了搜寻增强、研究模式、挪用代码及绘制图表、多次挪用联网搜寻等本领,并针对性地训练了模型的 Agent 本领。其能够独立完成规划、挪用、组合外部工具及信息,并可完成产业分析、产品对比等各类复杂需求。
“天工 3.0”号称全球首个多模态“超等模型”,集成了 AI 搜寻、AI 写作、AI 长文本阅读、AI 对话、AI 语音合成、AI 图片生成、AI 漫画创作、AI 图片识别、AI 音乐生成、AI 代码写作、AI 表格生成等多项本领,民间称其为“大模型时代的超等应用”。
据IT之家此前报道,昆仑万维去年 10 月开源了百亿级大语言模型“天工”Skywork-13B 系列,并配套开源了 600GB、150B Tokens 开源中文数据集。
昆仑万维“天工”Skywork-13B 系列目前包括 130 亿参数的两大模型:Skywork-13B-Base 模型、Skywork-13B-Math 模型,IT之家附开源地点如下:
Skywork-13B 下载地点(Model Scope):https://modelscope.cn/organization/skywork
Skywork-13B 下载地点(Github):https://github.com/SkyworkAI/Skywork