การพากย์เสียงด้วย AI คือการแปลเสียงโดยใช้ปัญญาประดิษฐ์ เมื่อใช้ฟีเจอร์แปลวิดีโอ Adobe Firefly จะรับรู้เสียงพูดและแปลเป็นภาษาอื่นโดยใช้เสียงของผู้พูดต้นฉบับพร้อมซิงก์การเคลื่อนไหวริมฝีปาก จึงเป็นเครื่องมือบนเว็บที่ช่วยส่งสารไปถึงผู้ชมในวงกว้างยิ่งขึ้น
เครื่องมือพากย์เสียงด้วย AI ที่ดีที่สุดจะช่วยสร้างวิดีโอเวอร์ชันท้องถิ่นจากต้นฉบับ พร้อมการจับคู่เสียงที่สมจริง จังหวะที่เป็นธรรมชาติ และการซิงค์ริมฝีปาก โดยจะรักษาน้ำเสียงและอารมณ์ดั้งเดิมของผู้พูดไว้ พร้อมแปลบทสนทนาได้อย่างแม่นยำในหลายภาษา โมเดลพากย์เสียงด้วย AI ของ Firefly ทำทั้งหมดนี้ได้รวดเร็ว ปลอดภัยเชิงพาณิชย์ และรองรับการสร้างเนื้อหาที่แปลเป็นภาษาท้องถิ่นเป็นจำนวนมาก
การพากย์ทับคือเสียงบรรยายเพิ่มเติมที่เสริมบริบทให้เนื้อหา ส่วนการพากย์เสียงจะแทนที่บทสนทนาต้นฉบับด้วยเสียงใหม่ในภาษาอื่น โดยรักษาจังหวะ น้ำหนัก และอารมณ์ของผู้พูดไว้ Firefly มอบการจับคู่เสียงที่แม่นยำและสมจริงในหลายภาษาที่คงสไตล์การพูดของต้นฉบับไว้ได้อย่างครบถ้วน
การพากย์เสียงด้วย AI จะใช้ Generative AI ในการแปลบทพูดของการสนทนา ขณะที่คงลักษณะเสียงของผู้พูดต้นฉบับเอาไว้ การพากย์เสียงด้วย AI ใน Adobe Firefly ช่วยคงน้ำเสียง โทนเสียง และจังหวะการพูดตามจริงของผู้พูดในภาษาต่างๆ ทำให้ลดทั้งเวลาและต้นทุนการผลิตได้อย่างมีนัยสำคัญ พร้อมมอบประสบการณ์การรับชมที่ราบรื่นยิ่งขึ้น ซึ่งแตกต่างจากการพากย์เสียงแบบดั้งเดิมที่ต้องใช้นักพากย์ในการบันทึกบทสนทนาใหม่
ได้ การพากย์เสียงด้วย AI สามารถปรับการเคลื่อนไหวของปากผู้พูดให้ตรงกับเสียงที่แปลแล้ว ฟีเจอรซิงค์ริมฝีปากมีให้บริการในแผน Adobe Creative Cloud สำหรับองค์กรบางแผนเท่านั้น ทั้งนี้ คุณสามารถยกเลิกการเลือกฟีเจอร์นี้ได้หากต้องการแปลเสียงโดยไม่ซิงค์กับริมฝีปาก
Firefly รองรับภาษาต่อไปนี้ในการแปลและลิปซิงค์สำหรับทั้งเสียงและวิดีโอ: ภาษาอังกฤษ (อินเดีย, อเมริกา, อังกฤษ), ภาษาสเปน (สเปน, อาร์เจนตินา, ละตินอเมริกา), ภาษาฝรั่งเศส (ฝรั่งเศส, แคนาดา), ภาษาเดนมาร์ก (เดนมาร์ก), ภาษานอร์เวย์ (นอร์เวย์), ภาษาดัตช์ (เนเธอร์แลนด์), ภาษาสวีเดน (สวีเดน), ภาษาเยอรมัน, ภาษาอิตาลี, ภาษาโปรตุเกส (บราซิล, โปรตุเกส), ภาษาฮินดี (อินเดีย), ภาษาญี่ปุ่น (ญี่ปุ่น), ภาษาเกาหลี (เกาหลีใต้), ภาษาจีน (ตัวย่อ)
ได้ Adobe Firefly ใช้ Generative AI ในการแปลบทพูดของการสนทนา ขณะที่คงเสียงเดิมของคุณเอาไว้ เทคโนโลยีของเราจะคงลักษณะต่างๆ ของเสียงเอาไว้ ซึ่งรวมถึงโทนเสียง จังหวะการพูด และคุณภาพเสียง