Từ hàng chục nghìn giờ video gameplay trên mạng, NVIDIA vừa cho ra lò một em AI biết cầm tay cầm và hoàn thành quest trong game luôn nha mọi người ơi!
Đội ngũ nghiên cứu từ NVIDIA cùng với các bạn ở đại học Stanford và Caltech vừa chính thức "thả thính" NitroGen - một mô hình AI xịn xò có thể chơi game trực tiếp chỉ bằng cách nhìn vào màn hình thôi. Nghe có vẻ hơi sci-fi nhưng mà real đấy!
Nói cho dễ hiểu thì NitroGen chính là một hệ thống AI biết chơi điện tử. Và điểm chill nhất là toàn bộ dữ liệu, công cụ đánh giá, trọng số mô hình và mã nguồn đều được public hết trên Hugging Face luôn.
Điểm đặc biệt là thay vì học theo kiểu truyền thống (dựa vào hệ thống điểm thưởng), NitroGen học theo phong cách... bắt chước! Đội dev đã sử dụng những video gameplay siêu đặc biệt: ngoài quay cảnh game ra, còn có hẳn hình ảnh "tay cầm ảo" hiển thị luôn người chơi đang bấm nút gì. Xịn chưa!
Nhờ các kỹ thuật thị giác máy tính kiểu SIFT và XFeat, hệ thống này xác định được chính xác vị trí của "tay cầm ảo", rồi dùng mô hình SegFormer để phân tích chi tiết từng nút bấm, từng cần gạt. Độ chính xác cao vãi chưởng luôn!
Về mặt kỹ thuật thì NitroGen còn "ké fame" từ dự án robot GR00T của NVIDIA nữa. Nhờ vậy mà nó mạnh hơn hẳn mấy em bot chơi game thông thường, hướng tới mục tiêu trở thành một "tác nhân vạn năng" - tức là chơi được mọi thứ ấy!
Kết quả test cho thấy khi gặp những game hoàn toàn mới (chưa được train), NitroGen vẫn đạt tỷ lệ thành công cao hơn tới 52% so với các mô hình khác. Điều này chứng tỏ việc "cho ăn" nhiều data hình ảnh có thể tạo ra đột phá, giống như cách mấy em AI ngôn ngữ lớn đã làm vậy.
Tuy nhiên phải nói thật là hiện tại NitroGen chỉ giỏi ở các dòng game hành động, đua xe và đi bàn 2D thôi - tức là mấy thể loại chơi bằng tay cầm. Còn những game cần chuột + bàn phím như MOBA hay RTS thì em ấy vẫn còn... "non" lắm.
Nguồn: genk.vn
Đội ngũ nghiên cứu từ NVIDIA cùng với các bạn ở đại học Stanford và Caltech vừa chính thức "thả thính" NitroGen - một mô hình AI xịn xò có thể chơi game trực tiếp chỉ bằng cách nhìn vào màn hình thôi. Nghe có vẻ hơi sci-fi nhưng mà real đấy!
Nói cho dễ hiểu thì NitroGen chính là một hệ thống AI biết chơi điện tử. Và điểm chill nhất là toàn bộ dữ liệu, công cụ đánh giá, trọng số mô hình và mã nguồn đều được public hết trên Hugging Face luôn.
Điểm đặc biệt là thay vì học theo kiểu truyền thống (dựa vào hệ thống điểm thưởng), NitroGen học theo phong cách... bắt chước! Đội dev đã sử dụng những video gameplay siêu đặc biệt: ngoài quay cảnh game ra, còn có hẳn hình ảnh "tay cầm ảo" hiển thị luôn người chơi đang bấm nút gì. Xịn chưa!
Nhờ các kỹ thuật thị giác máy tính kiểu SIFT và XFeat, hệ thống này xác định được chính xác vị trí của "tay cầm ảo", rồi dùng mô hình SegFormer để phân tích chi tiết từng nút bấm, từng cần gạt. Độ chính xác cao vãi chưởng luôn!
Về mặt kỹ thuật thì NitroGen còn "ké fame" từ dự án robot GR00T của NVIDIA nữa. Nhờ vậy mà nó mạnh hơn hẳn mấy em bot chơi game thông thường, hướng tới mục tiêu trở thành một "tác nhân vạn năng" - tức là chơi được mọi thứ ấy!
Kết quả test cho thấy khi gặp những game hoàn toàn mới (chưa được train), NitroGen vẫn đạt tỷ lệ thành công cao hơn tới 52% so với các mô hình khác. Điều này chứng tỏ việc "cho ăn" nhiều data hình ảnh có thể tạo ra đột phá, giống như cách mấy em AI ngôn ngữ lớn đã làm vậy.
Tuy nhiên phải nói thật là hiện tại NitroGen chỉ giỏi ở các dòng game hành động, đua xe và đi bàn 2D thôi - tức là mấy thể loại chơi bằng tay cầm. Còn những game cần chuột + bàn phím như MOBA hay RTS thì em ấy vẫn còn... "non" lắm.
Nguồn: genk.vn