Chip AI đầu tiên trên thế giới xử lý mô hình ngôn ngữ lớn với mức tiêu thụ năng lượng thấp

Một nhóm nghiên cứu tại Viện Khoa học và Công nghệ tiên tiến Hàn Quốc (KAIST) đã phát triển chip bán dẫn trí tuệ nhân tạo (AI) đầu tiên trên thế giới có khả năng xử lý mô hình ngôn ngữ lớn (LLM) với mức tiêu thụ năng lượng cực thấp.

Theo hãng tin Yonhap, Bộ Khoa học và Công nghệ thông tin Hàn Quốc ngày 6/3 cho biết nhóm nghiên cứu, do Giáo sư Yoo Hoi-jun tại Trung tâm nghiên cứu chất bán dẫn KAIST PIM làm trưởng nhóm, đã phát triển chip AI có khả năng xử lý mô hình ngôn ngữ GPT-2 của công ty OpenAI (Mỹ) với mức tiêu thụ điện năng cực thấp - chỉ 400 miliwatt - và tốc độ cao 0,4 giây.

Con chip vuông 4,5 mm, được phát triển theo quy trình 28 nanomet của Tập đoàn Samsung Electronics, có mức tiêu thụ điện năng ít hơn 625 lần so với con chip GPU A-100 của "gã khổng lồ" chip AI toàn cầu Nvidia, vốn cần 250 watt điện để xử lý LLM. Con chip do KAIST phát triển cũng có diện tích nhỏ hơn 41 lần so với sản phẩm của Nvidia, do đó có thể sử dụng trên các thiết bị như điện thoại di động.

Bộ Khoa học và Công nghệ thông tin Hàn Quốc cho biết việc sử dụng công nghệ điện toán mô phỏng não người, đặc biệt là mạng lưới thần kinh tăng đột biến (SNN), là yếu tố cần thiết để đạt được thành tựu này.

Trước đây, công nghệ này kém chính xác hơn mạng lưới thần kinh sâu (DNN) và chủ yếu có khả năng phân loại hình ảnh đơn giản. Tuy nhiên, nhóm nghiên cứu đã thành công trong việc cải thiện độ chính xác của công nghệ để phù hợp với DNN và ứng dụng cho LLM.

Nhóm nghiên cứu cho biết chip AI mới của họ có thể tối ưu hóa mức tiêu thụ năng lượng tính toán trong khi vẫn duy trì độ chính xác bằng cách sử dụng kết hợp DNN và SNN, đồng thời tinh chỉnh hiệu quả các tham số lớn của LLM.