xAI 工程师花三天就改写 Grok-2 物理堆栈,速度大幅提升

on

|

views

and

comments

马斯克旗下 xAI 稍早发表 Grok-2 大型语言模型聊天机器人,推出後持续进步,xAI 两位开发者短短三天就重写推理程式码堆栈,使 Grok-2 和 Grok-2 mini 资讯分析和输出速度大幅提升。

xAI 开发者 Igor Babuschkin 於 X 表示,Grok-2 mini 速度经改良後提高一倍。团队用 SGLang 重写推理堆栈,不只提升速度,还略微提升模型准确性。SGLang 是开源高效系统,执行复杂语言模型程式,性能比现有系统高达 6.4 倍。

第三方 Lmsys Chatbot Arena 排行榜,Grok-2 以 1,293 分位居第二,与 Google Gemini-1.5 Pro 并列,仅次 OpenAI 最新版 ChatGPT-4。Grok-2 mini 也跃升至第五位,得分为 1,268 分。Grok-2 数学任务排第一,硬提示、编码和指令跟随等多类别也表现出色。xAI 团队表示,将继续改进 Grok-2 mini 处理速度,以满足用户对高性能低运算成本的需求。

  • Grok-2 gets a speed bump after developers rewrite code

(本文由 Unwire Pro 授权转载;首图来源:xAI)

openvpn好用吗

热门文章

Anduril 与 OpenAI 合作,美媒:需密切关注透明度

Anduril 近日宣布将与 OpenAI 合作,将 ChatGPT 与该公司的无人机科技结合,并开发反无人机相关技术,美国科技媒体〈BGR〉指出,各界应谨慎关注两间公司合作後续结果。 自从 ChatGPT 於 2022 年底推出,并在 2023 年引起全球风靡後,人们对於人工智慧最终是否会像科幻电...

意法半导体推出车载音讯D类放大器

意法半导体(STMicroelectronics, ST)新推出之HFA80A车规模拟输入D类音讯放大器兼具高...

Bureau Veritas协助研华成功取得IEC 62443认证

Bureau Veritas(必维国际检验集团)宣布,成功协助研华完成两项IEC 62443-4-2资安认证(...

最新文章

相关推荐

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
最旧
最新 最多投票
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x