NVIDIA ทำให้การปรับใช้ MetaHuman ที่ขับเคลื่อนด้วย AI ง่ายขึ้นด้วยปลั๊กอิน ACE และไมโครเซอร์วิสใหม่

Unreal Fest Seattle 2024 ได้เริ่มต้นขึ้นแล้ว และ NVIDIA ได้ประกาศเปิดตัวปลั๊กอินใหม่บนอุปกรณ์สำหรับ NVIDIA ACE ใน Unreal Engine 5 ซึ่งเพิ่มความคล่องตัวในการสร้างและปรับใช้ตัวละคร MetaHuman ที่ขับเคลื่อนด้วย AI บนพีซี Windows

จุดเด่นที่สำคัญ ปลั๊กอิน Unreal Engine 5 ACE ใหม่:

ปลั๊กอิน Audio2Face-3D: เปิดใช้งานการลิปซิงค์และแอนิเมชั่นใบหน้าที่ขับเคลื่อนโดย AI ได้โดยตรงภายใน Unreal Engine 5 ปลั๊กอินคำสั่ง Nemotron-Mini 4B: ให้การสร้างการตอบสนองสำหรับบทสนทนาของตัวละครเชิงโต้ตอบ ปลั๊กอินดึงข้อมูล Augmented Generation (RAG): ให้ข้อมูลตามบริบทเพื่อปรับปรุงการโต้ตอบของตัวละคร

ปลั๊กอิน Audio2Face-3D สำหรับ Autodesk Maya:

อำนวยความสะดวกให้กับแอนิเมชั่นใบหน้าที่ขับเคลื่อนด้วยเสียงคุณภาพสูงใน Maya รวมซอร์สโค้ดสำหรับการปรับแต่งและบูรณาการกับเครื่องมือสร้างเนื้อหาดิจิทัลอื่น ๆ ปรับปรุงขั้นตอนการทำงานระหว่าง Maya และ Unreal Engine 5

Unreal Engine 5 Renderer Microservice พร้อม Pixel Streaming:

ใช้ประโยชน์จากเทคโนโลยี Unreal Pixel Streaming ของ Epic ขณะนี้รองรับไมโครเซอร์วิส NVIDIA ACE Animation Graph และ Linux OS ในการเข้าถึงก่อนใคร ช่วยให้นักพัฒนาสามารถสตรีมตัวละคร MetaHuman ที่มีความแม่นยำสูงไปยังอุปกรณ์ใดๆ ผ่านทาง Web Real-Time Communication (WebRTC)

ประโยชน์สำหรับนักพัฒนา:

ลดความซับซ้อนในการบูรณาการมนุษย์ดิจิทัลที่ขับเคลื่อนด้วย AI เข้ากับเกมและแอปพลิเคชัน ปรับไมโครเซอร์วิสให้เหมาะสมเพื่อความหน่วงต่ำและการใช้หน่วยความจำน้อยที่สุดบนพีซี Windows ปรับปรุงความสามารถในการปรับขยายสำหรับการปรับใช้มนุษย์ดิจิทัลบนคลาวด์ มอบเครื่องมือที่ปรับแต่งได้และซอร์สโค้ดสำหรับความต้องการการพัฒนาที่ปรับแต่งโดยเฉพาะ

นักพัฒนาจะสามารถสมัครเข้าใช้งานก่อนใครเพื่อดาวน์โหลดไมโครเซอร์วิสตัวเรนเดอร์ Unreal Engine 5 พร้อมรองรับไมโครเซอร์วิส Animation Graph และ Linux OS ปลั๊กอิน Maya ACE พร้อมให้ดาวน์โหลดบน GitHub

ศึกษาข้อมูลเพิ่มเติม : https://developer.nvidia.com/blog/simplify-and-scale-ai-powered-metahuman-deployment-with-nvidia-ace-and-unreal-engine-5/