xAI 工程师花三天就改写 Grok-2 物理堆栈,速度大幅提升

on

|

views

and

comments

马斯克旗下 xAI 稍早发表 Grok-2 大型语言模型聊天机器人,推出後持续进步,xAI 两位开发者短短三天就重写推理程式码堆栈,使 Grok-2 和 Grok-2 mini 资讯分析和输出速度大幅提升。

xAI 开发者 Igor Babuschkin 於 X 表示,Grok-2 mini 速度经改良後提高一倍。团队用 SGLang 重写推理堆栈,不只提升速度,还略微提升模型准确性。SGLang 是开源高效系统,执行复杂语言模型程式,性能比现有系统高达 6.4 倍。

第三方 Lmsys Chatbot Arena 排行榜,Grok-2 以 1,293 分位居第二,与 Google Gemini-1.5 Pro 并列,仅次 OpenAI 最新版 ChatGPT-4。Grok-2 mini 也跃升至第五位,得分为 1,268 分。Grok-2 数学任务排第一,硬提示、编码和指令跟随等多类别也表现出色。xAI 团队表示,将继续改进 Grok-2 mini 处理速度,以满足用户对高性能低运算成本的需求。

  • Grok-2 gets a speed bump after developers rewrite code

(本文由 Unwire Pro 授权转载;首图来源:xAI)

openvpn好用吗

热门文章

储能/需量反应带来巨大价值 绿色微电网进可攻退可守

用电量不容小觑的资料中心,已成为地区电网能否稳定运作的新考验。如果资料中心运作所需的电力,能有一部分透过结合绿...

後悔也来不及!英特尔前CEO错过收购辉达机会

近日有传闻指出,2005年时任英特尔执行长Paul Otellini曾提出收购辉达的建议,并愿意支付高达200亿美元的价格,这一提案在英特尔董事会内部引发了激烈讨论,但最终却遭到否决。

AI不是万能 无法取代的职业有哪些

随着人工智慧(AI)技术的进步,这些职业仍无法被AI轻易取代,其中包括领导、创造性的工作和专业技术人员等。

最新文章

相关推荐

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
最旧
最新 最多投票
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x