Theo Venture Beat, tỷ phú Elon Musk, giám đốc của những công ty nổi tiếng như Tesla, SpaceX và xAI, mới đây đã thông báo trên mạng xã hội X rằng xAI đã khởi động quá trình đào tạo một mô hình ngôn ngữ lớn (LLM) trên siêu máy tính mạnh nhất thế giới, mang tên Memphis Supercluster, nằm ở Tennessee (Mỹ).
Siêu cụm Memphis được trang bị 100.000 GPU Nvidia H100 được làm mát bằng chất lỏng, đây là một trong những dòng chip xử lý đồ họa hàng đầu hiện nay. Nhờ vào kiến trúc RDMA (Remote Direct Memory Access) độc đáo, siêu máy tính này cam kết cung cấp hiệu suất tuyệt vời và độ trễ thấp trong quá trình đào tạo trí tuệ nhân tạo.
Ông Musk thông báo rằng xAI có kế hoạch đào tạo "trí tuệ nhân tạo mạnh nhất thế giới theo mọi tiêu chí" trên siêu máy tính Memphis Supercluster vào tháng 12 tới. Ông cũng nhấn mạnh rằng hệ thống này sẽ tạo ra "lợi thế to lớn" cho xAI trong cuộc cạnh tranh phát triển trí tuệ nhân tạo.
Dù tỷ phú Elon Musk được biết đến với các mục tiêu đầy tham vọng, việc hoàn tất dự án này vào tháng 12 sắp tới vẫn là một thách thức không nhỏ. Hơn nữa, xAI cũng đang phải đối mặt với sự cạnh tranh quyết liệt từ các đối thủ như OpenAI, Anthropic, Google, Microsoft và Meta, những công ty đang mạnh tay đầu tư vào việc phát triển LLM và SLM.
Theo thông tin từ The Information, Microsoft đang làm việc cùng OpenAI để phát triển một siêu máy tính chuyên huấn luyện AI với giá trị lên tới 100 tỷ USD, được gọi bằng tên mã Stargate. Điều này có khả năng gây ra mối đe dọa cho vị trí "hàng đầu thế giới" của Memphis Supercluster trong thời gian sắp tới.
Tuy nhiên, nhờ vào sự đầu tư mạnh mẽ cùng với tham vọng của Elon Musk, Memphis Supercluster được kỳ vọng sẽ trở thành một trong những trung tâm nghiên cứu và phát triển trí tuệ nhân tạo hàng đầu toàn cầu, góp phần thúc đẩy sự tiến bộ của công nghệ này trong tương lai.
