NVIDIA ทำให้การปรับใช้ MetaHuman ที่ขับเคลื่อนด้วย AI ง่ายขึ้นด้วยปลั๊กอิน ACE และไมโครเซอร์วิสใหม่
Share | Tweet |
NVIDIA ทำให้การปรับใช้ MetaHuman ที่ขับเคลื่อนด้วย AI ง่ายขึ้นด้วยปลั๊กอิน ACE และไมโครเซอร์วิสใหม่
Unreal Fest Seattle 2024 ได้เริ่มต้นขึ้นแล้ว และ NVIDIA ได้ประกาศเปิดตัวปลั๊กอินใหม่บนอุปกรณ์สำหรับ NVIDIA ACE ใน Unreal Engine 5 ซึ่งเพิ่มความคล่องตัวในการสร้างและปรับใช้ตัวละคร MetaHuman ที่ขับเคลื่อนด้วย AI บนพีซี Windows
จุดเด่นที่สำคัญ
ปลั๊กอิน Unreal Engine 5 ACE ใหม่:
ปลั๊กอิน Audio2Face-3D: เปิดใช้งานการลิปซิงค์และแอนิเมชั่นใบหน้าที่ขับเคลื่อนโดย AI ได้โดยตรงภายใน Unreal Engine 5
ปลั๊กอินคำสั่ง Nemotron-Mini 4B: ให้การสร้างการตอบสนองสำหรับบทสนทนาของตัวละครเชิงโต้ตอบ
ปลั๊กอินดึงข้อมูล Augmented Generation (RAG): ให้ข้อมูลตามบริบทเพื่อปรับปรุงการโต้ตอบของตัวละคร
ปลั๊กอิน Audio2Face-3D สำหรับ Autodesk Maya:
อำนวยความสะดวกให้กับแอนิเมชั่นใบหน้าที่ขับเคลื่อนด้วยเสียงคุณภาพสูงใน Maya
รวมซอร์สโค้ดสำหรับการปรับแต่งและบูรณาการกับเครื่องมือสร้างเนื้อหาดิจิทัลอื่น ๆ
ปรับปรุงขั้นตอนการทำงานระหว่าง Maya และ Unreal Engine 5
Unreal Engine 5 Renderer Microservice พร้อม Pixel Streaming:
ใช้ประโยชน์จากเทคโนโลยี Unreal Pixel Streaming ของ Epic
ขณะนี้รองรับไมโครเซอร์วิส NVIDIA ACE Animation Graph และ Linux OS ในการเข้าถึงก่อนใคร
ช่วยให้นักพัฒนาสามารถสตรีมตัวละคร MetaHuman ที่มีความแม่นยำสูงไปยังอุปกรณ์ใดๆ ผ่านทาง Web Real-Time Communication (WebRTC)
ประโยชน์สำหรับนักพัฒนา:
ลดความซับซ้อนในการบูรณาการมนุษย์ดิจิทัลที่ขับเคลื่อนด้วย AI เข้ากับเกมและแอปพลิเคชัน
ปรับไมโครเซอร์วิสให้เหมาะสมเพื่อความหน่วงต่ำและการใช้หน่วยความจำน้อยที่สุดบนพีซี Windows
ปรับปรุงความสามารถในการปรับขยายสำหรับการปรับใช้มนุษย์ดิจิทัลบนคลาวด์
มอบเครื่องมือที่ปรับแต่งได้และซอร์สโค้ดสำหรับความต้องการการพัฒนาที่ปรับแต่งโดยเฉพาะ
นักพัฒนาจะสามารถสมัครเข้าใช้งานก่อนใครเพื่อดาวน์โหลดไมโครเซอร์วิสตัวเรนเดอร์ Unreal Engine 5 พร้อมรองรับไมโครเซอร์วิส Animation Graph และ Linux OS ปลั๊กอิน Maya ACE พร้อมให้ดาวน์โหลดบน GitHub
ศึกษาข้อมูลเพิ่มเติม : https://developer.nvidia.com/blog/simplify-and-scale-ai-powered-metahuman-deployment-with-nvidia-ace-and-unreal-engine-5/