Publier

SpaceX自研C语言AI训练框架接近完工,将用于训练Grok v5

币界网
币界网
币界网消息,SpaceX CEO马斯克透露,SpaceX内部团队正在接近完成用C语言自研的超大规模AI训练框架v1.0版本。该框架在硬件映射与并行机制上,能精准适配由22万张英伟达GB300加速卡与800G网卡组成的超大规模计算集群。为了压榨底层算力,框架在设计上极度贴近裸金属(bare metal)底层,并深度采用流水线并行(pipeline parallelism)技术。在应对超大规模训练任务时,纯C语言编写的底层架构相较于谷歌主流的高级AI框架JAX,潜在运行速度可提升一个数量级以上(即10倍以上)。全新自研训练栈将运行于SpaceX旗下的Colossus超级计算集群,直接服务于下一代大模型Grok v5的全量训练与迭代。

Avertissement : les contenus d'OKX Orbit sont uniquement publiés à titre informatif. En savoir plus

Réponses

Aucun commentaire pour le moment. Soyez le premier à répondre !

Related Flash News

ChainCatcherIl y a 5 h

La start-up d’IA Groq lève 650 millions de dollars pour ses nouvelles entités

OdailyIl y a 7 h

La rotation de la monnaie chaude s’accélère : du Bitcoin à l’or, puis à l’IA et aux semi-conducteurs de stockage

币界网Il y a 10 h

La base d’inférence open source de Perplexity (pplx-garden) contourne la taxe réseau de Nvidia pour obtenir une communication ultra-rapide multi-cartes

币界网Il y a 10 h

NVIDIA a lancé Gamma-World, un modèle multi-agents supportant la collaboration à quatre personnes et le temps réel à 24 FPS

ChainCatcherIl y a 11 h

L’IA et les principales actions technologiques poursuivent leur forte dynamique, tandis que Gate élargit sa couverture mondiale du trading d’actifs

币界网Il y a 16 h

Des investisseurs étrangers ont acheté des actions japonaises pour la huitième semaine consécutive

BlockbeatsIl y a 17 h

Le trading boursier américain crée de la richesse sur la chaîne : une adresse a investi 4,3 millions de yuans en capital pour entrer sur le marché boursier américain, avec une augmentation de 280 % en deux mois.

BlockbeatsIl y a 1 j

« Photon Stock God » : L’investissement de Nvidia aide Nokia à se transformer en infrastructure d’IA, les initiés ayant activement augmenté leurs avoirs au cours du mois écoulé

币界网Il y a 1 j

Introduction de la recherche AlphaGo, le nouveau cadre de génération vidéo MCTS offre des durées vidéo plus longues que Sora

币界网Il y a 1 j

Le chiffre d’affaires annualisé a grimpé à 600 millions de dollars, et le fournisseur de services d’inférence en IA Baseten prévoit de lever 1 milliard de dollars à une valorisation de 11 milliards de dollars