马斯克旗下xAI今日中午发布Grok 3 消息称具备自我纠正机制和强化学习能力

2025年2月18日 11人浏览 / 0人评论 / 添加收藏

2月18日消息,据外媒报道,xAI的领导者马斯克当地时间周日已在社交媒体上表示,新一代的大语言模型Grok 3,将在太平洋时间周一晚8点发布,将是地球上最聪明的人工智能。

太平洋时间周一晚8点,对应的北京时间是周二中午12点,这也就意味着xAI Grok 3的发布会,在今日中午就将正式开始。

随着发布时间的临近,外媒也在报道中给出了大量有关这一款大语言模型的更多信息,包括训练中提供的算力、训练的数据来源、具备的功能等。

在算力方面,有外媒在报道中称xAI仅花费8个月就建成的Colossus超级计算机,加快了Grok 3的开发速度,这一超级计算机由10万块英伟达H100驱动,提供了2亿GPU小时的训练时间,是Grok 2的10倍,算力的显著提升帮助Grok 3更有效的处理大型数据集,减少了训练时间,并提高了准确性。

除了大幅增加的算力,xAI在训练Grok 3的过程中,还调整了训练方法,以提高能力,也采用了合成数据集、自我纠正机制和强化学习来提高性能。

xAI训练Grok 3的合成数据集,是由人工生成的数据集,不是从真实世界收集的数据,他们通过模拟各种场景来训练人工智能模型,确保数据集的多样性和受控,这有助于提高学习效率,并解决了数据隐私方面的担忧。

自我纠正机制则是允许识别和纠正模型自身错误的人工智能技术,通过评估输出并同已知的正确响应进行比较,模型可以随着时间的推移改进回应,减少错误并提高准确性。

强化学习使AI模型通过奖励或惩罚来学习,可以通过试错来最大限度的提高决策能力。此外,外媒在报道中还提到,xAI引入了人工反馈循环和情境训练,以确保更自然和更准确的反馈。(海蓝)

全部评论