ACE (Avatar Cloud Engine) của NVIDIA là một công nghệ thu hút sự chú ý của cộng đồng game thủ. Gần đây, hãng công nghệ này đã công bố các dịch vụ vi mô sản xuất cho công nghệ ACE, cho phép các nhà phát triển trò chơi, công cụ và ứng dụng tích hợp một cách mượt mà các mô hình trí tuệ nhân tạo vào hình đại diện hoặc nhân vật không người thực hiện (NPC) trong các tựa game trong tương lai.
Công nghệ này đã được NVIDIA mở rộng trong suốt năm 2023 với việc giới thiệu NeMo SteerLM, một công cụ cho phép nhà phát triển điều chỉnh các yếu tố như biểu cảm khuôn mặt, cử chỉ và giọng nói của hình đại diện kỹ thuật số. NeMo SteerLM sử dụng một mô hình ngôn ngữ lớn (LLM) để tạo ra các phản hồi tự nhiên và phù hợp với bối cảnh.
Sau đó, NVIDIA và Inworld AI sẽ hợp tác để kết hợp công nghệ hình đại diện kỹ thuật số của NVIDIA với công nghệ VR và AR của Inworld AI để tạo ra những trải nghiệm thực tế ảo và thực tế tăng cường nhập vai tốt hơn.
Từ năm 2024, NVIDIA đã bắt đầu hợp tác với nhiều nhà phát triển khác nhau thông qua dịch vụ ACE của mình để áp dụng Audio2Face (A2F) và Riva Automatic Speech Recognition (ASR) để nâng cao khả năng hỗ trợ trí tuệ nhân tạo cho các nhân vật không người chơi (NPC).
Theo đó, Riva ASR cho phép người chơi giao tiếp với nhân vật trí tuệ nhân tạo thông qua việc sử dụng micro thay vì việc gõ văn bản. Mục tiêu của mô hình ASR là để cho phép người chơi có thể nói chuyện một cách tự nhiên và ngẫu nhiên, tạo ra một cuộc trò chuyện sống động và chân thực.
Ngoài ra, công nghệ Audio2Face cho phép tạo ra biểu cảm khuôn mặt cho các nhân vật trong trò chơi chỉ từ âm thanh, ví dụ như chuyển đổi văn bản thành giọng nói. A2F được áp dụng cả cho biểu cảm khuôn mặt và hiệu ứng "lip sync" theo thời gian thực.
NVIDIA cũng cho biết rằng các nhà phát triển trò chơi và hình đại diện tương tác đang tiên phong sử dụng công nghệ ACE và AI tạo sinh để chuyển đổi tương tác giữa người chơi và NPC được trong trò chơi và ứng dụng. Các nhà phát triển sử dụng ACE bao gồm Convai, Charisma.AI, Inworld, miHoYo, NetEase Games, Ourpalm, Tencent, Ubisoft và UneeQ.
