Để chạy AI tại chỗ, tiêu chí quan trọng nhất khi chọn card đồ họa là dung lượng bộ nhớ VRAM, vì mô hình phải nằm vừa trong VRAM mới chạy nhanh. Card NVIDIA được hỗ trợ phần mềm AI rộng rãi nhất nhờ nền tảng CUDA; card AMD và máy Mac chip Apple cũng chạy được nhiều công cụ phổ biến. Với nhu cầu cá nhân, card từ 12GB VRAM trở lên là điểm khởi đầu dễ chịu; 16 đến 24GB cho trải nghiệm tốt hơn với mô hình cỡ vừa.
Vì sao AI cần GPU
Mô hình AI thực hiện hàng tỉ phép nhân ma trận cho mỗi câu trả lời hay bức ảnh. CPU có ít lõi mạnh, giỏi việc tuần tự; GPU có hàng nghìn lõi nhỏ tính song song, rất hợp với kiểu tính toán này. Kết quả là cùng một mô hình, chạy trên GPU có thể nhanh hơn CPU nhiều lần.
VRAM quan trọng hơn tốc độ chip
Mô hình phải được nạp vào bộ nhớ để chạy. Nếu mô hình lớn hơn VRAM, phần mềm phải chia một phần sang RAM hệ thống, tốc độ giảm mạnh. Vì vậy với AI, một card tầm trung nhiều VRAM thường hữu ích hơn card mạnh nhưng ít VRAM. Kỹ thuật lượng tử hóa giúp mô hình nhỏ đi đáng kể, cho phép chạy mô hình lớn hơn trên cùng card.
| Nhu cầu | VRAM gợi ý | Ghi chú |
|---|---|---|
| Thử mô hình ngôn ngữ nhỏ | 8GB | Đủ cho mô hình vài tỉ tham số |
| Mô hình ngôn ngữ nhỏ dùng hằng ngày, tạo ảnh cơ bản | 12GB | Điểm khởi đầu dễ chịu |
| Mô hình cỡ vừa, tạo ảnh chất lượng cao | 16 đến 24GB | Linh hoạt hơn nhiều |
| Mô hình lớn, huấn luyện, phục vụ nhiều người | Nhiều card hoặc GPU máy chủ | Cần tư vấn cấu hình riêng |
NVIDIA, AMD hay Mac
- NVIDIA: hệ sinh thái CUDA được hầu hết thư viện và công cụ AI hỗ trợ đầu tiên, ít rắc rối nhất khi cài đặt.
- AMD: giá trên mỗi GB VRAM thường hấp dẫn, hỗ trợ phần mềm đã cải thiện nhưng đôi khi cần cấu hình thêm.
- Mac chip Apple dòng M: bộ nhớ hợp nhất dùng chung cho CPU và GPU nên chạy được mô hình khá lớn, phù hợp người dùng Mac; tốc độ tạo ảnh thường chậm hơn GPU rời cao cấp.
Các linh kiện khác cần chú ý
- RAM hệ thống: tối thiểu 32GB nếu chạy AI thường xuyên.
- Nguồn điện: đủ công suất và chất lượng tốt, GPU tải AI liên tục rất lâu.
- Tản nhiệt: vỏ máy thoáng, quạt tốt để tránh giảm xung khi nóng.
- Ổ SSD: mô hình nặng hàng chục GB, SSD NVMe giúp nạp nhanh.
- Mainboard: khe PCIe phù hợp, nếu dự định lắp nhiều card cần kiểm tra khoảng cách và số làn.
Có nên mua GPU hay dùng dịch vụ đám mây
Nếu chỉ dùng trợ lý AI cho công việc văn phòng, dịch vụ đám mây tiện và rẻ hơn. GPU riêng đáng đầu tư khi bạn tạo ảnh, video AI nhiều, chạy mô hình với dữ liệu nhạy cảm, hoặc phát triển ứng dụng AI cần thử nghiệm liên tục. Với nhu cầu không đều, có thể thuê máy chủ GPU theo giờ trước khi quyết định mua.
Kiểm tra trước khi mua
Xác định mô hình hoặc công cụ bạn định chạy, tra yêu cầu VRAM tối thiểu và khuyến nghị. Kiểm tra case máy có đủ chỗ cho card dài, nguồn có đủ đầu cắm. Với máy cho doanh nghiệp, nên chọn linh kiện có bảo hành chính hãng rõ ràng vì máy chạy AI hoạt động cường độ cao.
Khi phân vân giữa hai card cùng tầm giá, hãy chọn card nhiều VRAM hơn. Với AI, thiếu VRAM là giới hạn cứng không khắc phục được bằng cấu hình phần mềm.
Muốn đưa AI vào công việc của doanh nghiệp? PCTech tư vấn, đánh giá mức sẵn sàng AI và triển khai chatbot, AI agent, tự động hóa cho doanh nghiệp.
10 câu hỏi, 2 phút, nhận mức độ và việc nên làm tiếp theo. Dùng thử ngay
Câu hỏi thường gặp
Card đồ họa chơi game có chạy AI được không?
Được. Card chơi game NVIDIA và AMD đời mới đều chạy được nhiều công cụ AI phổ biến, miễn là đủ VRAM.
Laptop gaming có dùng chạy AI được không?
Được với mô hình nhỏ và vừa, nhưng VRAM trên laptop thường ít hơn bản desktop cùng tên và dễ nóng khi chạy lâu.
Có thể ghép hai card để có nhiều VRAM hơn không?
Một số phần mềm chạy mô hình ngôn ngữ hỗ trợ chia mô hình qua nhiều card. Cấu hình phức tạp hơn và cần mainboard, nguồn phù hợp.
Card cũ có dùng được không?
Card cũ nhiều VRAM vẫn hữu ích, nhưng cần kiểm tra phần mềm còn hỗ trợ dòng card đó và tình trạng phần cứng.
Bài viết liên quan
- Chạy AI trên máy tính cá nhân (local AI): cần gì và có đáng không
- NPU và AI PC là gì? Có cần mua laptop AI không
- Ollama là gì? Chạy mô hình AI miễn phí trên máy của bạn
- Deep Learning là gì? Học sâu khác học máy thế nào
- AI inference (suy luận) là gì? Khác huấn luyện thế nào