Bài đăng

SpaceX自研C语言AI训练框架接近完工,将用于训练Grok v5

币界网
币界网
币界网消息,SpaceX CEO马斯克透露,SpaceX内部团队正在接近完成用C语言自研的超大规模AI训练框架v1.0版本。该框架在硬件映射与并行机制上,能精准适配由22万张英伟达GB300加速卡与800G网卡组成的超大规模计算集群。为了压榨底层算力,框架在设计上极度贴近裸金属(bare metal)底层,并深度采用流水线并行(pipeline parallelism)技术。在应对超大规模训练任务时,纯C语言编写的底层架构相较于谷歌主流的高级AI框架JAX,潜在运行速度可提升一个数量级以上(即10倍以上)。全新自研训练栈将运行于SpaceX旗下的Colossus超级计算集群,直接服务于下一代大模型Grok v5的全量训练与迭代。

Miễn trừ trách nhiệm: Nội dung OKX Orbit chỉ để tham khảo. Tìm hiểu thêm

Phản hồi

Chưa có bình luận. Trở thành người phản hồi đầu tiên!

Related Flash News

ChainCatcher3 giờ trước

Công ty khởi nghiệp AI Groq đang huy động được 650 triệu đô la cho các thực thể mới của mình

Odaily5 giờ trước

Vòng quay tiền nóng tăng tốc: từ Bitcoin sang vàng, sau đó là AI và chất bán dẫn lưu trữ

币界网7 giờ trước

Cơ sở suy luận mã nguồn mở của Perplexity pplx-garden bỏ qua thuế mạng của Nvidia để đạt được giao tiếp cực nhanh nhiều thẻ

币界网8 giờ trước

NVIDIA đã phát hành Gamma-World, một mô hình thế giới đa tác nhân hỗ trợ cộng tác bốn người và 24 FPS thời gian thực

ChainCatcher9 giờ trước

AI và cổ phiếu công nghệ hàng đầu tiếp tục đà tăng trưởng mạnh mẽ, trong khi Gate mở rộng phạm vi giao dịch tài sản toàn cầu

币界网13 giờ trước

Khối ngoại mua cổ phiếu Nhật Bản tuần thứ tám liên tiếp

Blockbeats15 giờ trước

Giao dịch chứng khoán Mỹ tạo ra sự giàu có trên chuỗi: Một địa chỉ đầu tư 4,3 triệu nhân dân tệ vốn để tham gia thị trường chứng khoán Mỹ, với mức tăng 280% trong hai tháng.

Blockbeats1 ngày trước

"Photon Stock God": Khoản đầu tư của Nvidia giúp Nokia chuyển đổi thành cơ sở hạ tầng AI, với những người trong cuộc tích cực tăng lượng nắm giữ của họ trong tháng qua

币界网1 ngày trước

Giới thiệu tìm kiếm AlphaGo, khung tạo video MCTS mới cung cấp thời lượng video dài hơn Sora

币界网1 ngày trước

Doanh thu hàng năm tăng lên 600 triệu đô la và nhà cung cấp dịch vụ suy luận AI Baseten có kế hoạch huy động 1 tỷ đô la với mức định giá 11 tỷ đô la