Hình ảnh: NVIDIA
NVIDIA đã công bố NVIDIA Avatar Cloud Engine (ACE) cho Trò chơi, một dịch vụ đúc mô hình AI tùy chỉnh nhằm mục đích chuyển đổi trò chơi bằng cách mang lại trí thông minh cho các nhân vật không thể chơi được (NPC) thông qua các tương tác ngôn ngữ tự nhiên do AI cung cấp. Về cơ bản, dịch vụ này cho phép trải nghiệm chơi trò chơi trong đó người chơi có thể trò chuyện thông minh, không theo kịch bản và năng động với các NPC có tính cách kiên định phát triển theo thời gian, bao gồm cả hoạt ảnh và biểu cảm khuôn mặt chính xác, mặc dù một video demo 4K đã được phát hành để giới thiệu nền tảng cho thấy điều đó hộp thoại kết quả có thể nghe hơi cứng và không tự nhiên. Video có tỷ lệ khung hình cực kỳ rộng và có sự tham gia của Jin, một nhân viên cửa hàng mì ramen, do nhóm nghệ thuật của NVIDIA Lightspeed Studios tạo ra và được hiển thị hoàn toàn trong Unreal Engine 5, sử dụng NVIDIA RTX Direct Illumination (RTXDI) để chiếu sáng theo dõi tia và phó giám đốc John Spitzer cho biết: “AI sáng tạo có khả năng cách mạng hóa khả năng tương tác mà người chơi có thể có với các nhân vật trong trò chơi và tăng đáng kể mức độ đắm chìm trong trò chơi”. chủ tịch của nhà phát triển và công nghệ hiệu suất tại NVIDIA. “Dựa trên chuyên môn của chúng tôi về AI và kinh nghiệm hàng chục năm làm việc với các nhà phát triển trò chơi, NVIDIA đang đi đầu trong việc sử dụng AI tổng quát trong trò chơi.”
Mô hình Nền tảng AI của NVIDIA ACE dành cho trò chơi
NVIDIA NeMo, cung cấp các mô hình ngôn ngữ nền tảng và công cụ tùy chỉnh mô hình để nhà phát triển có thể điều chỉnh thêm các mô hình cho nhân vật trò chơi. Mô hình ngôn ngữ lớn (LLM) có thể tùy chỉnh này cho phép cốt truyện và tính cách nhân vật cụ thể phù hợp với thế giới trò chơi của nhà phát triển. Nhà phát triển có thể điều chỉnh tốt hơn các tương tác của người chơi trong ngữ cảnh của một cảnh thông qua các quy tắc có thể lập trình cho NPC với Rau bảo vệ NeMo. NVIDIA Riva, cung cấp khả năng nhận dạng giọng nói tự động (ASR) và chuyển văn bản thành khả năng-speech (TTS) để kích hoạt hội thoại trực tiếp bằng giọng nói với NVIDIA NeMo. NVIDIA Omniverse Audio2Face, ngay lập tức tạo hoạt ảnh khuôn mặt biểu cảm cho các nhân vật trò chơi chỉ từ một nguồn âm thanh. Audio2Face có các trình kết nối Đa dạng cho Unreal Engine 5, vì vậy các nhà phát triển có thể thêm hoạt ảnh khuôn mặt trực tiếp vào các nhân vật MetaHuman.
Từ NVIDIA GeForce bài đăng:
Bản demo Kairos được tận dụng NVIDIA Riva cho khả năng chuyển giọng nói thành văn bản và chuyển văn bản thành giọng nói, NVIDIA NeMo hỗ trợ AI đàm thoại và Audio2Face cho hoạt ảnh khuôn mặt do AI hỗ trợ từ đầu vào bằng giọng nói. Các mô-đun này được tích hợp liền mạch vào nền tảng dịch vụ Convai và được đưa vào Unreal Engine 5 và MetaHuman để đưa Jin vào cuộc sống.
Các nhà phát triển trò chơi và công ty khởi nghiệp đã sử dụng các công nghệ AI thế hệ mới của NVIDIA. Chẳng hạn, GSC Game World đang sử dụng Audio2Face trong S.T.A.L.K.E.R. 2 Trái tim của Chornobyl. Và nhà phát triển độc lập Fallen Leaf đang sử dụng Audio2Face cho hoạt ảnh trên khuôn mặt nhân vật trong Fort Solis, phim kinh dị khoa học viễn tưởng góc nhìn thứ ba của họ lấy bối cảnh trên sao Hỏa. Ngoài ra, Charisma.ai, một công ty hỗ trợ nhân vật ảo thông qua AI, đang tận dụng Audio2Face để hỗ trợ hoạt ảnh trong công cụ hội thoại của họ.
Tham gia thảo luận về bài đăng này trên diễn đàn của chúng tôi…
