แปลงวิดีโอ AI ที่มีมุมกล้องหน้าและข้างในเฟรมเดียว ให้กลายเป็นไฟล์แอนิเมชัน GLB ของสิ่งมีชีวิตใดก็ได้
โปรเจกต์ patch-gg/anymove บน GitHub เป็นเครื่องมือทำโมชันแคปเจอร์สำหรับสิ่งมีชีวิตทุกรูปแบบ เช่น หมาป่า มังกร แมงมุมยักษ์ หรือปีศาจไฟ จากวิดีโอ AI เพียงคลิปเดียว โดยใช้โมเดลวิดีโอสร้างภาพสองมุมกล้อง (ด้านหน้าซ้าย ด้านข้างขวา) ในเฟรมเดียว แล้วใช้ DINOv2 อ่านตำแหน่งข้อต่อเพื่อประกอบเข้ากับโครงกระดูก ก่อนจะส่งออกเป็นไฟล์ GLB
การทำงานเริ่มต้นจากการสร้างโมเดล 3D และโครงกระดูก จากนั้นใช้โมเดลวิดีโอ MiniMax H3 Max บน fal สร้างคลิป 5 วินาที (ราคาประมาณ 0.26 ดอลลาร์) ระบบจะฝึกตัวอ่านข้อต่อด้วยภาพเรนเดอร์ 2,200 โพส ใช้เวลาประมาณ 20 นาทีบน GPU หนึ่งตัว ตัวอ่านจะหาตำแหน่งข้อต่อในทั้งสองมุมมอง แล้วนำมาเทียบกันในระบบ 3D เพื่อให้โครงกระดูกขยับตามจุดเหล่านั้น ใช้เวลาอ่านคลิป 10 วินาที และฟิตติ้งโครงกระดูกไม่ถึงหนึ่งนาที
ปัจจุบันโปรเจกต์นี้เปิดมาแล้ว 1 วัน ได้รับความสนใจจนมีดาว 167 ดวง และติดอันดับ #5 ในหมวด repo AI เปิดใหม่ 7 วันที่ได้ดาวเยอะสุด โดยมีต้นทุนต่อชิ้นงาน เช่น เมช Tripo H3.1 ราคา 0.40 ดอลลาร์, คลิปวิดีโอ 0.26 ดอลลาร์ และการฝึก LoRA ประมาณ 12 ดอลลาร์ อย่างไรก็ตามยังมีข้อจำกัด เช่น การเดินของสัตว์แปดขาบางท่าไม่ลงตัว ท่านอนราบยังจับไม่ได้ และโมเดลวิดีโออาจมีอาการดริฟต์
✨ จุดเด่น
- การแปลงไฟล์ — เปลี่ยนคลิปวิดีโอ AI ให้เป็นแอนิเมชัน GLB 24 fps ได้ในเวลาไม่ถึงหนึ่งนาที
- ความหลากหลาย — รองรับสิ่งมีชีวิตหลากหลายรูปแบบ เช่น สัตว์สี่ขา มังกรที่มีปีก แมงมุมแปดขา และปีศาจไฟ
- ระบบเอเจนต์ — รองรับการทำงานผ่าน Claude Code plugin และ Agent Skills ที่ช่วยนำทางทีละขั้นตอน
- ต้นทุนชัดเจน — มีค่าใช้จ่ายต่อชิ้นงานระบุไว้ชัดเจน เช่น เมช 0.40 ดอลลาร์ และคลิปวิดีโอ 0.26 ดอลลาร์
🙋 ใครเหมาะจะลอง: เหมาะสำหรับนักพัฒนาและผู้สนใจงาน 3D ที่มี NVIDIA GPU พร้อม CUDA (ต้องการ 24 GB สำหรับเทรนตัวอ่าน), ติดตั้ง Python 3.11, Blender 5.x บน PATH และมี fal key สำหรับสร้างคลิป
ทีมข่าว เอไอไทย.com · เรียบเรียงจากหน้าโปรเจกต์ patch-gg/anymove — รายละเอียดล่าสุดดูที่ต้นทาง
ความคิดเห็น 0
กำลังโหลดความคิดเห็น...