Nhà khoa học máy tính Richard Sutton, người đoạt giải thưởng Turing danh giá năm 2024 và là đồng sáng lập trường phái học tăng cường (reinforcement learning) hiện đại, vừa chính thức thành lập một công ty khởi nghiệp mới mang tên Oak Lab tại Toronto, Canada. Mục tiêu của startup này là chế tạo các tác nhân trí tuệ nhân tạo (AI agent) có khả năng tự học hỏi và thích nghi liên tục từ môi trường xung quanh thay vì phụ thuộc hoàn toàn vào dữ liệu huấn luyện tĩnh.
Bối cảnh & Nguyên nhân
Quyết định thành lập Oak Lab của Richard Sutton xuất hiện trong bối cảnh làn sóng phát triển AI hiện nay đang bị thống trị bởi các mô hình ngôn ngữ lớn (LLM) và phương pháp học sâu truyền thống. Theo The Decoder, Sutton thẳng thắn nhận định các phương pháp học sâu hiện tại là 'yếu kém và kém hiệu quả'. Ông cho rằng việc phụ thuộc vào các tập dữ liệu khổng lồ được gán nhãn sẵn chỉ tạo ra các hệ thống AI tĩnh, không có khả năng tự cải tiến khi đối mặt với những biến đổi thực tế của thế giới động.
Phân tích kỹ thuật & Công nghệ
Thay vì đi theo lối mòn của các kiến trúc transformer thông thường, Oak Lab định hướng tập trung vào việc hiện thực hóa các nguyên lý của học tăng cường trực tuyến (online reinforcement learning). Công nghệ của startup này hướng tới việc xây dựng các AI agent có thể liên tục tương tác với môi trường, nhận phản hồi (phần thưởng hoặc hình phạt) để tự điều chỉnh hành vi theo thời gian thực. Phương pháp này yêu cầu các thuật toán tối ưu hóa thuật toán hiệu quả cao để hệ thống có thể cập nhật trọng số mạng neuron liên tục mà không gặp phải hiện tượng 'quên thảm họa' (catastrophic forgetting).
Ý kiến chuyên gia & Nhận định
Sự ra đời của Oak Lab đã thu hút sự chú ý lớn từ cộng đồng nghiên cứu AI toàn cầu. Nhiều chuyên gia nhận định rằng tầm nhìn của Sutton về việc xây dựng các hệ sinh thái AI tự hành và tự thích nghi là một bước đi táo bạo nhưng cần thiết để vượt qua các giới hạn vật lý và tài nguyên của kỷ nguyên LLM hiện tại. Việc đặt trụ sở tại Toronto, một trong những trung tâm nghiên cứu AI hàng đầu thế giới và là nơi Sutton đã cống hiến nhiều năm tại Đại học Alberta và Viện AI Vector, sẽ giúp Oak Lab dễ dàng tiếp cận nguồn nhân lực chất lượng cao.
Tác động & Tương lai
Nếu Oak Lab thành công trong việc chứng minh tính khả thi của các AI agent tự học liên tục, đây sẽ là một cột mốc quan trọng định hình lại cách chúng ta thiết kế robot và các hệ thống tự hành. Đối với cộng đồng công nghệ tại Việt Nam, hướng đi này mở ra các cơ hội nghiên cứu mới về AI thích ứng trong các lĩnh vực như xe tự lái, quản lý năng lượng thông minh và tự động hóa công nghiệp, nơi các điều kiện môi trường luôn thay đổi và không thể dự đoán trước bằng dữ liệu tĩnh.