NVIDIA ACE (Avatar Cloud Engine) is a suite of AI-powered technologies developed by NVIDIA for bringing game characters and digital avatars to life with intelligent, real-time interactions. The platform combines multiple AI capabilities including natural language understanding, speech recognition, text-to-speech synthesis, facial animation, and emotion modeling to create game characters that can see, hear, speak, and respond to players naturally. NVIDIA ACE includes several key components: Audio2Face generates realistic facial animations from audio input, enabling characters to lip-sync and express emotions in real time; Riva provides automatic speech recognition and text-to-speech capabilities optimized for game character voices; and NeMo powers the natural language understanding that allows characters to comprehend and respond intelligently to player dialogue. ACE leverages NVIDIA's GPU computing infrastructure and can run locally on NVIDIA RTX hardware or through cloud deployment, offering flexible integration options for game studios. The platform provides microservices that developers can integrate into their existing game engines and pipelines. NVIDIA has demonstrated ACE technology through projects such as the Kairos demo, showcasing photorealistic characters capable of real-time conversation in a ramen shop setting. ACE is designed for AAA game studios, interactive entertainment companies, and developers building next-generation NPC experiences. The technology is available through NVIDIA's developer program, with enterprise licensing and partnership arrangements for studios integrating ACE into commercial game titles. NVIDIA ACE represents the company's vision for the future of interactive digital humans in games and beyond.

เฟรมเวิร์กเอเจนต์ AI

NVIDIA ACE ให้บริการกรอบงานที่อิงตามไมโครเซอร์วิสสำหรับการสร้างตัวแทน AI ที่เป็นอิสระและโต้ตอบได้ซึ่งปรากฏตัวเป็นตัวละครเกม แพลตฟอร์มนี้รวมความสามารถในการรับรู้ความเข้าใจ การให้เหตุผล และการแสดงออกในสถาปัตยกรรมแบบรวมที่นักพัฒนาสามารถปรับแต่งและปรับใช้สำหรับการสร้างตัวแทนตัวละครที่มีการกำหนดทิศทางด้วยตนเองในสภาพแวดล้อมแบบโต้ตอบ

เครื่องมือแอนิเมชัน AI

NVIDIA ACE รวมถึง Audio2Face ซึ่งเป็นเทคโนโลยีภาพเคลื่อนไหวใบหน้าที่ขับเคลื่อนด้วย AI ที่สร้างการเคลื่อนไหวใบหน้าตัวละครที่สมจริงจากอินพุตเสียงเท่านั้น สิ่งนี้ช่วยขจัดความจำเป็นในการใช้ การจับภาพการเคลื่อนไหวแบบดั้งเดิมหรือภาพเคลื่อนไหวที่มีการกำหนดเฟรมด้วยตนเองสำหรับการแสดงออกใบหน้า ส่งเสริมการผลิตลำดับการโต้ตอบของตัวละครด้วยเสียงอย่างรวดเร็ว

เครื่องสร้างอวตาร AI

NVIDIA ACE ขับเคลื่อนการสร้างอวตารดิจิทัลที่สมจริงผ่านเทคโนโลยี Audio2Face ซึ่งสร้างภาพเคลื่อนไหวใบหน้าแบบเรียลไทม์จากอินพุตเสียง แพลตฟอร์มนี้ช่วยให้นักพัฒนาสามารถสร้างมนุษย์ดิจิทัลที่มีการแสดงออกที่เป็นธรรมชาติ การซิงค์ริมฝีปาก และการตอบสนองทางอารมณ์สำหรับเกม ผู้ช่วยเสมือน และแอปพลิเคชันบันเทิงแบบโต้ตอบ

การพัฒนาเกมด้วย AI

NVIDIA ACE มอบชุดไมโครเซอร์วิส AI สำหรับนักพัฒนาเกมเพื่อการรวมเทคโนโลยีตัวละครอัจฉริยะเข้ากับเอนจิ่นเกม แพลตฟอร์มนี้ทำงานบน NVIDIA RTX hardware หรือโครงสร้างพื้นฐานบนคลาวด์ ให้สตูดิโอมีเครื่องมือที่พร้อมใช้งานสำหรับการจดจำเสียงพูด การสร้างบทสนทนา การแปลงข้อความเป็นเสียง และภาพเคลื่อนไหวใบหน้าในเกมเชิงพาณิชย์

เครื่องมือ NPC ด้วย AI

NVIDIA ACE ให้บริการชุดเทคโนโลยีที่ครอบคลุมสำหรับการสร้าง NPC ที่อัจฉริยะพร้อมความเข้าใจภาษาธรรมชาติ ความสามารถในการพูดแบบเรียลไทม์ และภาพเคลื่อนไหวใบหน้า แพลตฟอร์มนี้ช่วยให้ตัวละครเกมสามารถฟังเสียงของผู้เล่น เข้าใจจุดประสงค์ สร้างการตอบสนองที่สอดคล้องกับบริบท และแสดงอารมณ์ผ่านการเคลื่อนไหวใบหน้าที่สมจริง กำหนดมาตรฐานใหม่สำหรับการโต้ตอบของ NPC

เครื่องสร้างเสียง AI

NVIDIA ACE รวมถึงเทคโนโลยีการแปลงข้อความเป็นเสียงที่ขับเคลื่อนด้วย Riva ซึ่งได้รับการปรับให้เหมาะสมสำหรับเสียงตัวละครเกม สร้างเสียงที่ดูเป็นธรรมชาติแบบเรียลไทม์พร้อมการแสดงออกทางอารมณ์และคุณภาพเสียงที่เหมาะสมกับตัวละคร การสังเคราะห์เสียงนี้ทำงานได้อย่างมีประสิทธิภาพบน GPU ของ NVIDIA ช่วยให้เกิดการสร้างเสียงที่ตอบสนองต่อการโต้ตอบของตัวละคร