做这样一个网站平台,是不是机会来了……
美国当地时间3月17日,马斯克旗下的人工智能初创公司xAI正式宣布开源大模型Grok-1,遵循Apache 2.0协议开放模型权重和架构。xAI官网显示,xAI已经将Grok-1的权重和架构在软件托管平台GitHub上开源。美国《纽约时报》17日的报道称,马斯克开源Grok背后的原始代码,这是世界上最富有的人之一升级其控制人工智能未来战斗的结果。
xAI在其官网上介绍,Grok-1是3140亿参数的混合专家模型,这也让Grok-1成为迄今参数量最大的开源大语言模型,是Llama 2的4倍。相比之下,公开资料显示,OpenAI GPT-3.5的参数量为1750亿,Grok-1大幅领先。xAI还在官网上进一步公布了Grok-1的一些细节,基础模型基于大量文本数据训练,未针对特定任务进行微调。3140亿参数构成的混合专家模型,其中25%的参数能够针对特定的数据单元激活。