xAI của Elon Musk bắt tay với Nvidia để mở rộng Grok

Updated: 29/10/2024 at 16:00

Nhà sản xuất chip Nvidia vừa công bố vào thứ Hai rằng công nghệ mạng Spectrum-X của họ đã góp phần mở rộng siêu máy tính Colossus, thuộc startup xAI, hiện đang được công nhận là cụm đào tạo AI lớn nhất thế giới.

Siêu máy tính Colossus và khả năng đào tạo AI vượt trội

Tọa lạc tại Memphis, Tennessee, Colossus đảm nhiệm vai trò đào tạo cho thế hệ thứ ba của Grok, bộ mô hình ngôn ngữ lớn của xAI, được phát triển nhằm hỗ trợ các tính năng chatbot dành cho người dùng đăng ký X Premium. Siêu máy tính này được hoàn thành trong chỉ 122 ngày và đã bắt đầu đào tạo các mô hình đầu tiên chỉ 19 ngày sau khi lắp đặt. Theo thông báo của Nvidia, xAI, startup của tỷ phú công nghệ Elon Musk, dự định tăng gấp đôi công suất của hệ thống lên 200.000 GPU.

Colossus là một hệ thống GPU khổng lồ, trong đó mỗi GPU đảm nhiệm việc xử lý các tập dữ liệu lớn. Khi các mô hình Grok được đào tạo, chúng cần phân tích một khối lượng lớn văn bản, hình ảnh và dữ liệu để cải thiện độ chính xác trong phản hồi. Được Musk ca ngợi là cụm đào tạo AI mạnh mẽ nhất thế giới, Colossus kết nối 100.000 GPU NVIDIA Hopper thông qua mạng Remote Direct Memory Access (truy cập bộ nhớ trực tiếp từ xa) thống nhất. GPU Hopper của Nvidia xử lý các tác vụ phức tạp bằng cách phân chia khối lượng công việc và thực hiện xử lý song song.

Kiến trúc này cho phép dữ liệu di chuyển trực tiếp giữa các node, giúp giảm thiểu độ trễ và tối ưu hóa thông lượng cho các tác vụ đào tạo AI quy mô lớn. Trong khi các mạng Ethernet truyền thống thường gặp phải tình trạng tắc nghẽn và mất gói tin, dẫn đến giới hạn thông lượng ở mức 60%, Spectrum-X đạt được thông lượng lên đến 95% mà không làm giảm độ trễ.

Spectrum-X không chỉ cải thiện khả năng giao tiếp giữa các GPU mà còn tăng tốc độ và độ chính xác trong việc đào tạo Grok, điều này rất quan trọng để phát triển các mô hình AI có khả năng phản hồi hiệu quả trong các tương tác với con người. Thông báo mới cho thấy Nvidia tiếp tục khẳng định vị thế của mình trong lĩnh vực sản xuất chip đồ họa và AI, trong bối cảnh nhu cầu ngày càng tăng về công nghệ này.

Tham gia Telegram: https://t.me/tapchibitcoinvn

Theo dõi Twitter (X): https://twitter.com/tapchibtc_io

Theo dõi Tiktok: https://www.tiktok.com/@tapchibitcoin

Itadori

Theo Decrypt

Được đề cập trong bài viết
Mới cập nhật

x402 – một tiêu chuẩn thanh toán gốc Internet dành cho các tác nhân trí tuệ nhân tạo (AI) – đang ghi dấu ấn mạnh mẽ trên toàn bộ hệ sinh thái tiền điện tử, trở thành một trong những sáng kiến được quan tâm và thảo luận nhiều nhất... ...

Ethena (ENA) đang ghi nhận mức giảm gần 2% vào thời điểm cập nhật hôm thứ Ba, kéo dài chuỗi điều chỉnh trong tuần lên xấp xỉ 5%. Đáng lo ngại, sự suy yếu đồng thời của nhu cầu on-chain và dòng tiền từ nhà đầu tư bán lẻ có... ...

Thị trường toàn cầu đang hướng về thông báo ngày 29 tháng 10 của Chủ tịch Cục Dự trữ Liên bang Mỹ (Fed). Chủ tịch Jerome Powell sẽ công bố quyết định của Ủy ban Thị trường Mở Liên bang (FOMC) về việc cắt giảm (hoặc không cắt giảm) lãi... ...

Zcash (ZEC) đang giao dịch trong sắc đỏ dưới mốc 330 USD vào tối thứ Ba, phản ánh sự hạ nhiệt bước đầu sau cú tăng tốc mạnh mẽ hồi đầu tuần. Dữ liệu on-chain cho thấy hoạt động của nhà đầu tư nhỏ lẻ gia tăng đáng kể —... ...

Bitcoin đang trở nên khó tiếp cận hơn đối với các nhà đầu tư cá nhân, đặt ra câu hỏi liệu đà tăng hiện tại có thể duy trì vượt qua chu kỳ 4 năm truyền thống hay không. Theo công ty phân tích thị trường 10x Research, Bitcoin ở... ...

Giá Litecoin (LTC) hiện dao động quanh ngưỡng 99 USD trong phiên giao dịch chiều thứ Ba, nối dài đà tăng 7% của tuần trước. Sự kiện ETF giao ngay của LTC chính thức lên sàn Nasdaq trong ngày hôm nay đã “tiếp lửa” cho tâm lý thị trường, thu... ...

Các công ty đại chúng đang nắm giữ Bitcoin và Ether gần như đã dừng việc tích lũy thêm kể từ khi thị trường lao dốc vào đầu tháng 10, phản ánh sự giảm sút niềm tin trong thời gian gần đây. Theo ông David Duong, Trưởng bộ phận nghiên... ...

Thị trường tiền điện tử đang chuẩn bị bước vào một tuần đầy biến động, hứa hẹn sẽ tạo nên những chuyển động mạnh mẽ. Tuần cuối tháng 10 – vốn được xem là “tháng vàng” của Bitcoin – đang hội tụ hàng loạt sự kiện trọng đại: kỳ vọng... ...

Các altcoin như Official Trump (TRUMP), Helium (HNT) và Hedera (HBAR) đang trở thành tâm điểm khi đồng loạt vượt trội so với nhóm Top 200 tiền điện tử trong 24 giờ qua. Diễn biến kỹ thuật cho thấy TRUMP và HNT có thể sớm phá vỡ mô hình kênh... ...

Thượng nghị sĩ Thom Tillis của bang North Carolina, thành viên Đảng Cộng hòa thuộc Ủy ban Ngân hàng Thượng viện Hoa Kỳ, mới đây đã cảnh báo rằng Quốc hội chỉ còn vài tháng ngắn ngủi để thúc đẩy các dự luật liên quan đến tiền điện tử trước... ...

Xem thêm bài viết

Chọn chế độ hiển thị:
Bình thường Bảo vệ mắt Dark Mode