xAI 工程师花三天就改写 Grok-2 物理堆栈,速度大幅提升

on

|

views

and

comments

马斯克旗下 xAI 稍早发表 Grok-2 大型语言模型聊天机器人,推出後持续进步,xAI 两位开发者短短三天就重写推理程式码堆栈,使 Grok-2 和 Grok-2 mini 资讯分析和输出速度大幅提升。

xAI 开发者 Igor Babuschkin 於 X 表示,Grok-2 mini 速度经改良後提高一倍。团队用 SGLang 重写推理堆栈,不只提升速度,还略微提升模型准确性。SGLang 是开源高效系统,执行复杂语言模型程式,性能比现有系统高达 6.4 倍。

第三方 Lmsys Chatbot Arena 排行榜,Grok-2 以 1,293 分位居第二,与 Google Gemini-1.5 Pro 并列,仅次 OpenAI 最新版 ChatGPT-4。Grok-2 mini 也跃升至第五位,得分为 1,268 分。Grok-2 数学任务排第一,硬提示、编码和指令跟随等多类别也表现出色。xAI 团队表示,将继续改进 Grok-2 mini 处理速度,以满足用户对高性能低运算成本的需求。

  • Grok-2 gets a speed bump after developers rewrite code

(本文由 Unwire Pro 授权转载;首图来源:xAI)

openvpn好用吗

热门文章

首幅画作以108万美元成交 机器人艾达将受访

AI机器人「艾达」(Ai-Da)首件画作已经透过苏富比拍卖行出售,原先预计售价为120,000至180,000美元,但最终买家以高达108万美金的惊人价格拍下。

SPD力保电力系统安全 全面评估安全性/规格需求

浪涌保护元件(SPD)在各种形式的电力系统中变得越来越重要,其使用目的是保护电子设备、电路和通讯线路免受电压突...

储能/需量反应带来巨大价值 绿色微电网进可攻退可守

用电量不容小觑的资料中心,已成为地区电网能否稳定运作的新考验。如果资料中心运作所需的电力,能有一部分透过结合绿...

最新文章

相关推荐

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
最旧
最新 最多投票
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x