3月18日消息,据媒体报道,马斯克的AI创企xAI正式宣布其大语言模型Grok-1已实现开源,并向公众开放下载。


据了解,Grok-1是一款基于混合专家系统(Mixture-of-Experts,MoE)技术构建的大语言模型,拥有3140亿参数,远超OpenAI GPT-3.5的1750亿。这是迄今参数量最大的开源大语言模型,遵照Apache 2.0协议开放模型权重和架构。
xAI表示,Grok-1始终由xAI自行训练,其预训练阶段于2023年10月完成。此次发布的是Grok-1预训练阶段结束时的原始基础模型检查点,即该模型未经过针对任何具体应用的微调。
xAI的目的之一就是与OpenAI、谷歌、微软等对手在大模型领域进行竞争,其团队来自OpenAI、谷歌DeepMind、谷歌研究院、微软研究院等诸多知名企业和研究机构。
目前,xAI并没有放出Grok-1的具体测试成绩,它与其他公司的大模型之战将成为业内关注的焦点。
文章来源于互联,不代表科技云立场!如有侵权,请联系我们。
相关推荐
-
苹果汽车内部设计曝光 十年造车路终成空
近日,彭博社发表深度报道,揭示了苹果长达十年的电动汽车项目——代号“泰坦计划”(Project Titan)的曲折历程,该项目最终在上周宣布取消,引发了业界的广泛关注。 据悉,苹果…
-
三星Galaxy S24系列迎来2024年1月Google Play系统更新
自三星Galaxy S24系列上市以来,许多用户一直在期待其Google Play系统更新的推出。经过一个多月的等待,这一更新终于在全球范围内开始推送。如果您的设备是 Galaxy…
-
Spotify季度财报亮眼:月活跃用户突破6亿大关
近日,音乐流媒体巨头Spotify发布了最新季度财报,数据表现超出市场预期。在过去的三个月里,Spotify的月活跃用户(MAU)激增2800万,总数达到6亿,创下了公司历史新高。…
-
Android 15或将支持NFC无线充电:智能设备告别充电烦恼?
近日,有关Android 15新功能的消息引发了广泛关注。据悉,谷歌正在其最新版本的操作系统中增加对NFC无线充电的支持,这一创新技术有望为小型智能设备带来前所未有的充电体验。 N…
-
官宣:OPPO闪充十年媒体沟通会将于4月22日召开
今日,OPPO官方宣布将于4月22日14:30在东莞滨海湾召开“OPPO闪充十年媒体沟通会”。此次沟通会旨在回顾OPPO在闪充技术领域的十年发展历程,并展望未来的技术创新方向。 O…
-
疑似苹果 iPhone 16 手机设计图流出:回归竖排双摄、自带拍照按钮
2 月 5 日消息,X 平台消息源 Majin Bu 今日分享了“疑似苹果 iPhone 16 手机”的设计图,之后外媒 theapplehub 以此制作了系列手机的渲染图。 参考…
-
谷歌“查找我的设备”网络开始逐步向全球推出
谷歌近日宣布,其备受期待的“查找我的设备”网络已开始逐步向全球范围内的Android设备推出,这一功能旨在帮助用户定位并找回丢失或被盗的电子设备,即使设备处于离线状态。 谷歌在20…
-
欧盟《数字市场法》推动苹果Apple iOS浏览器变革
近日,欧盟的《数字市场法》迫使苹果在iOS上做出重大改变,允许使用竞争浏览器的引擎。这一变革预计将在iOS 17.4中实现,意味着Chrome和Firefox等浏览器可以在iPho…
-
英伟达黄仁勋否认三星HBM未通过测试,认证过程需要更加耐心
6 月 5 日消息,英伟达黄仁勋在 2024 台北国际电脑展上,表示仍在认证三星公司的 HBM 内存,否认三星 HBM 未通过任何英伟达测试,并表示认证三星 HBM 需要更多工作和…
-
Apple Watch X:设计革新与期待
随着2024年的到来,Apple Watch的十周年庆典也日益临近。关于即将推出的Apple Watch X,各种传言和泄密信息不绝于耳。作为苹果智能手表的十周年之作,我们期待这款…
