Tập đoàn công nghệ ByteDance, công ty mẹ của TikTok, được cho là đang tiến hành huấn luyện một mô hình trí tuệ nhân tạo (AI) với quy mô khổng lồ lên tới 10 nghìn tỷ tham số. Thông tin này vừa được tờ Financial Times tiết lộ, đánh dấu một bước đi đầy tham vọng của gã khổng lồ công nghệ Trung Quốc trong việc khẳng định vị thế dẫn đầu trong cuộc đua siêu mô hình ngôn ngữ lớn (LLM). Nếu thành công, đây sẽ là mô hình AI có quy mô lớn nhất từng được phát triển tại quốc gia tỷ dân này.
Bối cảnh & Nguyên nhân
Trong bối cảnh cuộc đua AI toàn cầu ngày càng khốc liệt, các công ty công nghệ Trung Quốc đang nỗ lực bứt phá để thu hẹp khoảng cách với các đối thủ phương Tây như OpenAI hay Google. Trước khi thông tin về siêu dự án của ByteDance xuất hiện, Moonshot AI là đơn vị nắm giữ kỷ lục tại thị trường nội địa với mô hình Kimi K3. Tuy nhiên, dự án mới của ByteDance được cho là có kích thước lớn gấp ba lần so với Kimi K3. Điều này cho thấy ByteDance không chỉ muốn duy trì vị thế thống trị trong mảng mạng xã hội và thuật toán đề xuất, mà còn muốn làm chủ hạ tầng AI thế hệ mới để ứng dụng vào hệ sinh thái ứng dụng đa dạng của mình trên toàn cầu.
Phân tích kỹ thuật & Công nghệ
Một mô hình với 10 nghìn tỷ tham số đòi hỏi sức mạnh tính toán cực kỳ khủng khiếp cùng kiến trúc hệ thống tối ưu tối đa. Mặc dù thông tin chi tiết về phần cứng chưa được tiết lộ toàn diện, giới phân tích nhận định ByteDance phải đối mặt với thách thức lớn về nguồn cung chip GPU hiệu năng cao do các lệnh hạn chế xuất khẩu từ Mỹ. Để vượt qua rào cản này, hãng có thể đang áp dụng các kỹ thuật phân tán dữ liệu tiên tiến, kết hợp giữa việc tối ưu hóa thuật toán song song hóa mô hình (tensor parallelism) và tận dụng hiệu quả nguồn tài nguyên đám mây sẵn có. Kích thước tham số khổng lồ này hứa hẹn sẽ mang lại cho mô hình khả năng suy luận vượt trội và khả năng xử lý đa tác vụ phức tạp mà các mô hình nhỏ hơn chưa thể đạt được.
Ý kiến chuyên gia & Nhận định
Theo đánh giá của các chuyên gia công nghệ từ tờ Financial Times, việc theo đuổi một siêu mô hình 10 nghìn tỷ tham số cho thấy ByteDance sẵn sàng đầu tư nguồn lực tài chính khổng lồ cho AI dài hạn. Một số nhà phân tích thị trường tỏ ra thận trọng khi lưu ý rằng kích thước mô hình lớn không phải lúc nào cũng đồng nghĩa với hiệu năng thực tế tối ưu nếu thiếu đi dữ liệu huấn luyện chất lượng cao. Dẫu vậy, động thái này của ByteDance vẫn được xem là lời tuyên chiến mạnh mẽ gửi tới các đối thủ trực tiếp trong nước như Tencent, Alibaba và Baidu, buộc các tập đoàn này phải tăng tốc lộ trình phát triển của riêng mình.
Tác động & Tương lai
Sự xuất hiện của siêu mô hình từ ByteDance dự kiến sẽ tái định hình bản đồ công nghệ AI tại Trung Quốc và khu vực châu Á trong những năm tới. Đối với độc giả và giới phát triển tại Việt Nam, sự phát triển này mở ra cơ hội tiếp cận với các công nghệ nền tảng mạnh mẽ hơn thông qua các dịch vụ đám mây toàn cầu hoặc các ứng dụng thế hệ mới của ByteDance. Đồng thời, nó cũng gửi đi tín hiệu rõ ràng rằng cuộc đua phần cứng và mô hình quy mô lớn vẫn chưa hề có dấu hiệu hạ nhiệt, bất chấp những hoài nghi về tính hiệu quả kinh tế của các siêu mô hình AI.