3月18日消息,据媒体报道,马斯克的AI创企xAI正式宣布其大语言模型Grok-1已实现开源,并向公众开放下载。


据了解,Grok-1是一款基于混合专家系统(Mixture-of-Experts,MoE)技术构建的大语言模型,拥有3140亿参数,远超OpenAI GPT-3.5的1750亿。这是迄今参数量最大的开源大语言模型,遵照Apache 2.0协议开放模型权重和架构。
xAI表示,Grok-1始终由xAI自行训练,其预训练阶段于2023年10月完成。此次发布的是Grok-1预训练阶段结束时的原始基础模型检查点,即该模型未经过针对任何具体应用的微调。
xAI的目的之一就是与OpenAI、谷歌、微软等对手在大模型领域进行竞争,其团队来自OpenAI、谷歌DeepMind、谷歌研究院、微软研究院等诸多知名企业和研究机构。
目前,xAI并没有放出Grok-1的具体测试成绩,它与其他公司的大模型之战将成为业内关注的焦点。
文章来源于互联,不代表科技云立场!如有侵权,请联系我们。
相关推荐
-
英伟达中国特供AI芯片H20已开启预售:部分性能不如华为昇腾 910B,定价1.2万美元起
2 月 3 日消息,据路透社,英伟达专为中国市场设计的 AI 芯片 H20 系列已经开始接受经销商的预购,定价几乎与国产的华为 Ascend 910B 一致,但在某些关键领域的 F…
-
影驰发布RTX 4070 SUPER显卡:能够超频210MHz
据外媒报道,近日显卡厂商影驰发布了HOF名人堂版本的RTX 4070 SUPER HOF OC LAB Master系列,其中包括大师—X(Master-X)、大师版(Master…
-
YouTube 加大广告拦截器打击力度,用户反馈视频自动跳转至片尾
近日,据外媒报道指出,部分用户在安装广告拦截器的情况下访问 YouTube 网站时,遇到了视频自动跳转到结尾的问题,导致无法正常观看。这一行为被用户普遍认为是 YouTube 加大…
-
BlackBerry宣布与AMD合作 推动机器人行业的基础精度和控制能力
近日消息,在国际嵌入式展会(Embedded World)上,BlackBerry宣布与AMD合作,旨在通过实现新水平的低延迟、低抖动和可重复确定性,革新下一代机器人系统。两家公司…
-
2023年Q4欧洲智能手机市场:苹果重夺榜首,三星仍是年度销冠
2023年第四季度,欧洲(不含俄罗斯)智能手机市场出货量达3780万部,同比下降3%。苹果凭借1240万部的出货量,同比增长1%,扭转了连续七个季度落后于三星的局面,重新夺回市场领…
-
拜登政府加速推进《芯片法案》:530亿补贴助力半导体巨头
随着大选的临近,拜登政府计划在3月底前宣布发放《芯片法案》的第三笔补贴,总额高达530亿美元。这一举措旨在加快美国各地新工厂的建设,特别是针对先进制程半导体技术的投资。英特尔、台积…
-
微软上线Microsoft Graveyard:纪念那些被埋葬的科技遗珠
在科技界,微软作为一家全球知名的科技巨头,其产品线之广、更新迭代之快令人目不暇接。然而,随着市场的变化和战略的调整,微软也不得不放弃了一些曾经辉煌的产品。近期,一个名为“微软坟场”…
-
苹果折叠屏计划曝光:iPad或MacBook或先尝鲜
近日,有外媒从供应链渠道获悉,苹果折叠屏计划正在加速推进中。不过,令人意外的是,研发重心似乎已转向“更大屏幕设备”。这意味着,我们可能首先见到的苹果折叠屏产品并非iPhone,而是…
-
Anthropic Claude 3 Sonnet模型在Amazon Bedrock全面上线
近日,领先的AI公司Anthropic宣布其下一代最先进模型——Claude 3 Sonnet系列,已全面在Amazon Bedrock上线。这一重要进展为构建和扩展生成式AI应用…
-
Cruise自动驾驶子公司大幅裁员:重组之路
近日,总部位于美国的自动驾驶车辆公司Cruise,宣布裁减其员工总数的24%,即约900名员工。这一决定是该公司在经历了10月2日一辆机器出租车撞倒并拖拽行人的事件后,为了削减成本…
