Adobe After Effect เตรียมเพิ่ม Body Tracker ที่สามารถสร้างคาแรคเตอร์ 2D จากวิดีโอได้

ก่อนหน้านี้ After Effect ได้มีฟีเจอร์ Facial Motion ที่เป็นตัวตรวจจับการเคลื่อนไหวของใบหน้าในการสร้างคาแรคเตอร์ออกมาให้มีความสมจริงในการพูดหรือแสดงสีหน้าต่างๆ มากขึ้น โดยเราจะต้องเพิ่มวิดีโอเข้าไปในโปรแกรมและกดรันวิดีโอนั้นบนไฟล์ของคาแรคเตอร์ที่เราได้สร้างไว้ก่อนหน้านี้เพื่อให้คาแรคเตอร์ที่เราสร้างไว้สามารถขยับหน้าตาได้อย่างอิสระ

ภาพจาก : https://www.digitalartsonline.co.uk/news/motion-graphics/adobe-character-animator-this-new-animation-software-animates-characters-based-on-your-words-facial-expressions/

แต่สำหรับในตอนนี้ Adobe ได้ออกมาพรีวิวฟีเจอร์ใหม่ในโปรแกรม After Effect (AE) ที่สามารถตรวจจับความเคลื่อนไหวของมนุษย์และเปลี่ยนให้เป็นอนิเมชัน (Body Tracker) ที่มีชื่อว่า Go Figure โดยมันจะจับความเคลื่อนไหวต่างๆ ของมนุษย์จากวิดีโอที่เราเปิดในโปรแกรมและสร้างคาแรคเตอร์แบบสองมิติ (2D) ที่เป็นอนิเมชันขึ้นมาจากการตรวจจับความเคลื่อนไหวของร่างกายทั้งไม่ว่าจะเป็น แขน, ขา หรือลำตัวต่างๆ และสามารถสร้างคาแรคเตอร์ได้สูงสุดถึง 18 ตัวในซีนเดียว นอกจากนี้มันยังสามารถตรวจจับการแสดงออกทางสีหน้า (Facial Expression) และสร้าง Adobe’s Character Animator ที่มีการเคลื่อนไหวและแสดงสีหน้าได้ใกล้เคียงกับในวิดีโออีกด้วย ซึ่งลักษณะการทำงานของมันจะคล้ายกับ Motion Capture เพียงแต่ไม่จำเป็นที่จะต้องเพิ่มฮาร์ดแวร์อื่นๆ เข้าไปเพิ่มเติมแต่อย่างใด

โดยฟีเจอร์นี้จะใช้การทำงานของ Sensei (AI ของ Adobe) ที่ผ่านการพัฒนาของทีมวิจัยจาก Adobe ร่วมกับทีมวิจัยของมหาวิทยาลัย Massachusetts ทำให้เพิ่มความสมจริงในการสร้างและการควบคุมเคลื่อนไหวของคาแรคเตอร์ นอกจากนี้แล้วยังสามารถลบพื้นหลังหรือสร้าง Outline บริเวณรอบๆ สิ่งที่เราต้องการลบออกไปได้ด้วยฟีเจอร์ Content-aware fill และเพิ่ม Motion Graphic หรือสิ่งของอื่นๆ เพิ่มเติมเข้าไปในฉากได้ด้วย เช่น ถ้าคุณอยากให้คาแรคเตอร์ของคุณเล่นบาสเกตบอลก็สามารถสร้างลูกบาสเกตบอลขึ้นมาให้คาแรคเตอร์ของเราถือไว้ในมือได้

ภาพจาก : https://www.theverge.com/2019/11/5/20938360/adobe-max-after-effects-sneaks-body-tracker-feature-animations

ซึ่งฟีเจอร์ Body Tracker อย่าง Go Figure นี้ไม่ได้สร้างขึ้นมาเพื่อแทนที่กระบวนการทำอนิเมชันในโปรแกรม After Effect แต่อย่างใด เพียงแต่ทาง Adobe คาดหวังว่ามันจะช่วยให้ผู้ใช้ได้ประหยัดเวลามากยิ่งขึ้น

และฟีเจอร์ใหม่นี้ได้ปล่อยพรีวิวออกมาให้เห็นกันในงาน Adobe Max ที่เป็นงานประชุมประจำปีของ Adobe ไปแล้วเรียบร้อย นอกจากนี้ยังมีโปรเจคใหม่อย่าง Sweet Talk ที่ช่วยให้คุณสามารถเปลี่ยนรูปภาพหรือรูปวาดของคุณให้ดูมีชีวิตขึ้นมาได้ โดยจะมีฟีเจอร์ Mouth sync ที่ทำให้ปากของรูปนั้นๆ ขยับเพื่อรองรับการพากย์เสียง และเพิ่มความสมูธของคาแรคเตอร์ด้วยการใช้ AI ตรวจจับการเคลื่อนไหวเพื่อเพิ่มความสมจริงในการขยับหัวและปากตามคำพูดอีกด้วย