B站亮相 2024 世界人工智能大会,首次展出自研大语言模型

在 2024 世界人工智能大会(WAIC 2024)上,哔哩哔哩(以下简称“B站”)公布了多项自主研发的 AI 技能成果和 AIGC 多元创意,包括最新定制的 AI 语音声库、自研音视频大模型必剪 Studio 以及自研 AI 动态漫技能等。此外,B站自研的大语言模型系列也在此次 WAIC 2024 大会上首次展出,包括开源的 Index-1.9B chat 和 Index-1.9B character 两个模型。IT之家查询 GitHub 获悉,Index-1.9B 系列模型于 6 月开源,包含基座模型、对照组、

在 2024 世界人工智能大会(WAIC 2024)上,哔哩哔哩(以下简称“B站”)公布了多项自主研发的 AI 技能成果和 AIGC 多元创意,包括最新定制的 AI 语音声库、自研音视频大模型必剪 Studio 以及自研 AI 动态漫技能等。

B站亮相 2024 世界人工智能大会,首次展出自研大语言模型

此外,B站自研的大语言模型系列也在此次 WAIC 2024 大会上首次展出,包括开源的 Index-1.9B chat 和 Index-1.9B character 两个模型。

IT之家查询 GitHub 获悉,Index-1.9B 系列模型于 6 月开源,包含基座模型、对照组、对话模型、角色扮演模型:

Index-1.9B base : 基座模型,具有 19 亿非词嵌入参数量,在 2.8T 中英文为主的语料上预训练,多个评测基准上与同级别模型比处于领先

Index-1.9B pure : 基座模型的对照组,与 base 具有相同的参数和训练策略,不同之处在于过滤了该版本语料中所有指令相干的数据,以此来验证指令对 benchmark 的影响

Index-1.9B chat : 基于 index-1.9B base 通过 SFT 和 DPO 对齐后的对话模型

Index-1.9B character : 在 SFT 和 DPO 的基础上引入了 RAG 来实现 fewshots 角色扮演定制

在B站 15 周年演讲上,B站董事长兼 CEO 陈睿表示,2023 年,B站 AI 相干内容的日均视频播放量同比增长超过 80%,爆款内容涵盖科普资讯、AI 技能应用、数字人和创意应用等领域。

根据B站透露的数据,当前超过 8000 万用户每月在B站观看 AI 相干的视频,其中 6 成为 00 后。

Index-1.9B 系列模型开源地址:

https://github.com/bilibili/Index-1.9B

给TA打赏
共{{data.count}}人
人已打赏
应用

Midjourney 的 Style Raw 形式到底怎么用? 一篇文章帮你弄懂!

2024-7-5 7:39:14

应用

向开发者免费开放文心大模型 4.0,baidu文心智能体平台升级

2024-7-5 12:58:08

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索