中关村在线

热点资讯

B站亮相2024世界人工智能大会,首次展出自研大语言模型

7月5日,B站公布了多项自主研发的人工智能(AI)技术成果和人工智能内容生成(AIGC)多样性创意,包括最新定制的AI语音声库、自研音视频大模型必剪Studio以及自研AI动态漫技术等。此外,B站还展示了其自主研发的大语言模型系列,包括开源的Index-1.9B chat和Index-1.9B character两个模型。

在WAIC 2024大会上,B站董事长兼CEO陈睿表示,在2023年,B站AI相关内容的日均视频播放量同比增长超过80%。这些内容涵盖了科普资讯、AI技术应用、数字人和创意应用等领域。

根据B站透露的数据,目前已有超过8000万用户每月在B站观看与AI相关的视频,其中60%是00后。同时,Index-1.9B系列模型已在6月份开源,包含基座模型、对照组、对话模型和角色扮演模型等多个版本。

具体来说,Index-1.9B base是基座模型,具有19亿非词嵌入参数量,在2.8T中英文为主的语料上预训练,并且多个评测基准上与同级别模型比处于领先地位。Index-1.9B pure是基座模型的对照组,除了参数量和训练策略与base相同外,不同之处在于过滤了该版本语料中所有指令相关的数据来验证指令对benchmark的影响。

除此之外,Index-1.9B chat基于index-1.9b base通过SFT和DPO对齐后的对话模型;而Index-1.9B character是在SFT和DPO的基础上引入RAG来实现fewshots角色扮演定制。

关于此次大会上的发布内容,在未来我们可能会看到更多创新性和智能化的应用出现。同时也展现了B站正在不断加强自身在人工智能领域的实力和技术储备。

展开全文
人赞过该文
内容纠错

相关电商优惠

评论

更多评论
还没有人评论~ 快来抢沙发吧~

读过此文的还读过

点击加载更多
说点什么吧~ 0

发评论,赚金豆

收藏 0 分享
首页查报价问答论坛下载手机笔记本游戏硬件数码影音家用电器办公打印 更多

更多频道

频道导航
辅助工具