xAI 工程师花三天就改写 Grok-2 物理堆栈,速度大幅提升

on

|

views

and

comments

马斯克旗下 xAI 稍早发表 Grok-2 大型语言模型聊天机器人,推出後持续进步,xAI 两位开发者短短三天就重写推理程式码堆栈,使 Grok-2 和 Grok-2 mini 资讯分析和输出速度大幅提升。

xAI 开发者 Igor Babuschkin 於 X 表示,Grok-2 mini 速度经改良後提高一倍。团队用 SGLang 重写推理堆栈,不只提升速度,还略微提升模型准确性。SGLang 是开源高效系统,执行复杂语言模型程式,性能比现有系统高达 6.4 倍。

第三方 Lmsys Chatbot Arena 排行榜,Grok-2 以 1,293 分位居第二,与 Google Gemini-1.5 Pro 并列,仅次 OpenAI 最新版 ChatGPT-4。Grok-2 mini 也跃升至第五位,得分为 1,268 分。Grok-2 数学任务排第一,硬提示、编码和指令跟随等多类别也表现出色。xAI 团队表示,将继续改进 Grok-2 mini 处理速度,以满足用户对高性能低运算成本的需求。

  • Grok-2 gets a speed bump after developers rewrite code

(本文由 Unwire Pro 授权转载;首图来源:xAI)

openvpn好用吗

热门文章

意法半导体推出车载音讯D类放大器

意法半导体(STMicroelectronics, ST)新推出之HFA80A车规模拟输入D类音讯放大器兼具高...

Bureau Veritas协助研华成功取得IEC 62443认证

Bureau Veritas(必维国际检验集团)宣布,成功协助研华完成两项IEC 62443-4-2资安认证(...

辉达财报亮眼股价却走跌,陆行之:投资人 AI 毒瘾越来越大,担心拖累台积电

GPU 大厂辉达今日公布 2024 财年第三季财报,资料中心业绩创新高,带动公司整体营收达 351 亿美元,较上季成长 17%,较 2023 年同期成长 94%,且优於市场预期 331.6 亿美元。然预估第四季营收年增率较 2023 年同期 265% 放缓,造成辉达盘後股价下滑。前外资知名分析师陆行...

最新文章

相关推荐

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
最旧
最新 最多投票
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x