7 Q( q8 i' g& D. K: O7 c6 p. m& J" z0 |. _
2 j4 U" p6 Z D5 c
7 t( X; e& S: f6 A; [7 j( O
" A! K6 ]; c. _* o) C' V' F; a4 {7 B4 Y1 }& c
6月30日,华为和百度两家公司都宣布了最新的开源动作。
7 t% |) C& J+ v B7 E8 ^2 z2 r4 l I6 k5 j
, g' A3 M, I$ K. \6 _$ }
华为宣布开源部分盘古模型
" x+ y+ n, w1 |& i/ e4 ^% _/ c/ G! i7 e+ q2 u5 r6 S/ Q, A
7 N5 b1 ~5 B' I# v* u6 H
" `. R5 c' v4 @: ~8 Q华为技术有限公司30日宣布开源盘古70亿参数的稠密模型、盘古Pro MoE 720亿参数的混合专家模型和基于昇腾的模型推理技术。
# k, N2 q& _7 D; H, B根据公告,盘古Pro MoE 72B模型权重、基础推理代码和基于昇腾的超大规模MoE模型推理代码,已正式上线开源平台。盘古7B相关模型权重与推理代码将于近期上线开源平台。6 v, c! O9 |. J; n$ k
华为公告称,此举是华为践行昇腾生态战略的又一关键举措,推动大模型技术的研究与创新发展,加速推进人工智能在千行百业的应用与价值创造。2 n% O: H5 R: {% P
" B( N# g$ m/ U4 `/ v8 j9 z
7 |$ y, P6 k# f0 P5 P
百度文心大模型4.5系列正式开源
3 O D/ H$ a3 `( c& E4 I" w S6 d2 L- p! T
- {/ S5 O5 B% _
5 D( e3 W3 U! m# J( q/ F6月30日,百度正式开源文心大模型4.5系列模型,涵盖47B、3B激活参数的混合专家(MoE)模型,与0.3B参数的稠密型模型等10款模型,并实现预训练权重和推理代码的完全开源。目前,文心大模型4.5开源系列已可在飞桨星河社区、HuggingFace等平台下载部署使用,同时开源模型API服务也可在百度智能云千帆大模型平台使用。早在今年2月,百度就已预告了文心大模型4.5系列的推出计划,并明确将于6月30日起正式开源。0 v# M" C) S' M
* T1 s2 [3 @5 k& b6 r& V! j: X; x8 Z' F# z$ l
文心大模型4.5系列开源模型 - F& {5 l- A) q
5 `1 N& J5 y% F
" Y2 A6 v E! K, \2 B& Q; S此次百度一次性推出10款文心大模型4.5系列开源模型,在独立自研模型数量占比、模型类型数量、参数丰富度、开源宽松度与可靠性等关键维度上,均处于行业领先位置。 [% }, D6 S% Q+ D$ ^2 Y
据了解,文心大模型4.5开源系列权重按照Apache 2.0协议开源,支持开展学术研究和产业应用。此外,基于飞桨提供开源的产业级开发套件,广泛兼容多种芯片,降低模型的后训练和部署门槛。3 `; d% W9 Z3 @# C1 ~) l
值得关注的是,此次文心大模型4.5系列开源后,百度实现了框架层与模型层的“双层开源”。
3 q2 s T1 |5 h' X' H) [" N" }( f( G' Z, B; d- A) {
0 R( P. t0 X: i; f7 Q
! D8 m; c+ y ?* w0 n% u2 k& Y热门视频; d8 _8 x& D7 h1 M: S
^3 @0 w1 b I# p' @ q, J
! i' u+ P6 {4 t- M来源:大河报, I2 f* Q: m% M/ B1 F% q$ ~% T6 N) E
责编:房淑婧 赵鹏 高琳哲" z# _9 X7 U: m! |# k% n+ F. w
8 `3 G6 {1 i/ ~' c& J! O+ G8 V编辑:赵若云 & t6 ^4 x5 S5 B" N
% U0 p9 S. o% L3 R' }7 |
5 t0 a& _) P. q2 V9 }7 Y& z: p0 {5 ?0 B) O1 g
. w( G3 c* v* L5 T/ A9 v# m; |- ^; J/ J9 I! C
|