Adobe Firefly เปิดตัวการอัปเกรดวิดีโอ AI ครั้งใหญ่พร้อมการสร้างเสียงและความสามารถในการเคลื่อนไหวที่ปรับปรุงแล้ว

ทีมบรรณาธิการ BigGo
Adobe Firefly เปิดตัวการอัปเกรดวิดีโอ AI ครั้งใหญ่พร้อมการสร้างเสียงและความสามารถในการเคลื่อนไหวที่ปรับปรุงแล้ว

Adobe ได้ขยายแพลตฟอร์ม Firefly generative AI อย่างมีนัยสำคัญด้วยชุดฟีเจอร์การปรับปรุงวิดีโอที่ครอบคลุม ซึ่งแก้ไขช่องว่างที่เห็นได้ชัดที่สุดในการสร้างวิดีโอ AI นั่นคือเสียง การอัปเดตล่าสุดนี้แสดงถึงการพัฒนาครั้งสำคัญจากการมุ่งเน้นเริ่มต้นของแพลตฟอร์มในการสร้างภาพจากข้อความเมื่อสิบแปดเดือนที่แล้ว ทำให้ Adobe มีตำแหน่งในการแข่งขันอย่างก้าวร้าวมากขึ้นในตลาดวิดีโอ AI ที่พัฒนาอย่างรวดเร็ว

การสร้างเอฟเฟกต์เสียงที่ปฏิวัติวงการ

ฟีเจอร์ที่โดดเด่นในการเปิดตัวล่าสุดของ Adobe คือ Generate Sound Effects beta ซึ่งช่วยให้ผู้สร้างสรรค์สามารถผลิตเสียงที่กำหนดเองผ่านคำอธิบายข้อความและการสาธิตด้วยเสียง แนวทางที่นวัตกรรมนี้ไปไกลกว่าการแปลงข้อความเป็นเสียงแบบธรรมดาโดยให้ผู้ใช้สามารถบันทึกเสียงของตนเองเป็นสัญญาณเพื่อควบคุมการจับเวลา จังหวะ และความเข้มข้น ตัวอย่างเช่น ผู้สร้างสรรค์สามารถดูภาพวิดีโอของตน บันทึกเสียงตนเองเลียนแบบรูปแบบเสียงที่ต้องการ และรวมสิ่งนี้เข้ากับข้อความคำสั่งเชิงบรรยายเพื่อสร้างเสียงคุณภาพระดับมืออาชีพที่เข้ากับเนื้อหาภาพของพวกเขาได้อย่างสมบูรณ์แบบ ระบบจะให้ตัวเลือกเสียงหลายแบบ ทำให้ผู้สร้างสรรค์มีความยืดหยุ่นในการเลือกเสียงที่เหมาะสมที่สุดสำหรับโครงการของตน

คุณสมบัติของ Generate Sound Effects

  • การสร้างเสียงจากข้อความ
  • การป้อนข้อมูลเสียงเพื่อควบคุมจังหวะและความเข้มข้น
  • ตัวเลือกผลลัพธ์หลายแบบต่อการสร้างหนึ่งครั้ง
  • การผสานรวมกับจังหวะเวลาของเนื้อหาวิดีโอ
  • สถานะเป็นเวอร์ชัน Beta

โมเดลวิดีโอที่ปรับปรุงแล้วพร้อมความเที่ยงตรงในการเคลื่อนไหวที่ดีขึ้น

Adobe ได้อัปเกรดความสามารถหลักในการสร้างวิดีโอด้วย Firefly Video Model เวอร์ชัน 1.9 ซึ่งให้ความสมจริงในการเคลื่อนไหวและความแม่นยำในการเล่าเรื่องที่ดีขึ้นอย่างมีนัยสำคัญ โมเดลที่ปรับปรุงแล้วเป็นเลิศในการสร้างภูมิทัศน์แบบไดนามิกตั้งแต่ทิวทัศน์ธรรมชาติไปจนถึงสภาพแวดล้อมในเมือง ในขณะที่แสดงความเชี่ยวชาญที่น่าทึ่งในการเคลื่อนไหวของสัตว์ เอฟเฟกต์บรรยากาศเช่นรูปแบบสภาพอากาศ และสไตล์แอนิเมชันทั้ง 2D และ 3D การปรับปรุงความเที่ยงตรงในการเคลื่อนไหวหมายความว่าวิดีโอที่สร้างขึ้นตอนนี้เคลื่อนไหวได้อย่างราบรื่นและเป็นธรรมชาติมากขึ้น เลียนแบบฟิสิกส์ของโลกจริงได้ดีขึ้นในหัวข้อต่างๆ รวมถึงมนุษย์ สัตว์ และปรากฏการณ์ธรรมชาติ

เวอร์ชันของ Adobe Firefly Video Model

  • เวอร์ชันปัจจุบัน: 1.9
  • การปรับปรุงที่สำคัญ: ความแม่นยำในการเคลื่อนไหวที่ดีขึ้น การจำลองฟิสิกส์ที่ดีกว่า การเคลื่อนไหวของสัตว์และเอฟเฟกต์บรรยากาศที่ปรับปรุงแล้ว
  • การรองรับแอนิเมชัน: รองรับความสามารถในการสร้างแอนิเมชันทั้งแบบ 2D และ 3D

การควบคุมการสร้างสรรค์และตัวเลือกการปรับแต่งที่ขยายออกไป

แพลตฟอร์มตอนนี้เสนอการควบคุมที่ไม่เคยมีมาก่อนให้กับผู้สร้างสรรค์เหนือกระบวนการสร้างวิดีโอของพวกเขาผ่านฟีเจอร์ใหม่หลายอย่าง Composition Reference for Video ช่วยให้ผู้ใช้สามารถอัปโหลดวิดีโออ้างอิงเป็นเทมเพลต ขจัดความหงุดหงิดในการพยายามอธิบายแนวคิดภาพที่ซับซ้อนผ่านข้อความเพียงอย่างเดียว Style Presets ให้การใช้สไตล์ภาพที่แตกต่างกันด้วยการคลิกเดียว รวมถึง claymation, anime, line art, vector art และความงามสีขาวดำ นอกจากนี้ ฟีเจอร์ Enhance Prompt ใหม่จะปรับปรุงข้อความสั่งของผู้ใช้โดยอัตโนมัติด้วยการเพิ่มภาษาเชิงบรรยายที่ช่วยให้ Firefly เข้าใจเจตนาการสร้างสรรค์ได้ดีขึ้น

รูปแบบสไตล์ใหม่ที่พร้อมใช้งาน

  • Claymation
  • Anime
  • Line art
  • Vector art
  • Black and white
  • 2D animation

พันธมิตรเชิงกลยุทธ์และการรวมโมเดล

Adobe ได้ขยายไปไกลกว่าเทคโนโลยีที่เป็นกรรมสิทธิ์ของตนโดยการรวมโมเดล AI ของบุคคลที่สามเข้าไปใน Firefly Web App โดยตรง ผู้ใช้ตอนนี้สามารถเข้าถึง Veo 3 ของ Google, Ray 2 ของ Luma AI, Pika 2.2, Runway และ Image and Video Upscalers ของ Topaz ทั้งหมดจากภายในอินเทอร์เฟซเดียว แนวทางเชิงกลยุทธ์นี้เปลี่ยน Firefly ให้เป็นศูนย์กลางการสร้างสรรค์ที่ครอบคลุมมากกว่าเป็นเพียงเครื่องมือ AI แบบแยกเดี่ยว ซึ่งอาจทำให้เวิร์กโฟลว์ง่ายขึ้นสำหรับผู้สร้างสรรค์มืออาชีพที่ก่อนหน้านี้ต้องใช้หลายแพลตฟอร์มพร้อมกัน

โมเดล AI จากบุคคลที่สามที่รวมเข้าด้วยกัน

  • Google Veo 3
  • Luma AI's Ray 2
  • Pika 2.2
  • Runway
  • Topaz Image and Video Upscalers
  • Moonvalley's Marey

ความสามารถ Text-to-Avatar สำหรับการสร้างเนื้อหา

ฟีเจอร์ Text to Avatar ใหม่ตอบสนองความต้องการที่เพิ่มขึ้นสำหรับผู้นำเสนอที่สร้างด้วย AI โดยการแปลงสคริปต์เป็นวิดีโอที่นำโดยอวตาร ผู้ใช้สามารถเลือกจากไลบรารีของผู้นำเสนอเสมือน ปรับแต่งพื้นหลังและสำเนียง และสร้างวิดีโอที่ดูเหมือนมีมนุษย์จริงนำเสนอเนื้อหาตามสคริปต์ Adobe แนะนำการใช้งานรวมถึงการสร้างเนื้อหาการศึกษา บทความวิดีโอโซเชียลมีเดีย และการเพิ่มสัมผัสของมนุษย์ให้กับวัสดุต่างๆ แม้ว่าการใช้ AI เพื่อจำลองการปรากฏตัวของมนุษย์จะไม่ใช่เรื่องที่ผู้สังเกตการณ์มองข้าม

ฟีเจอร์เทคนิคขั้นสูงสำหรับการใช้งานระดับมืออาชีพ

ผู้สร้างสรรค์มืออาชีพจะได้รับประโยชน์จากการปรับปรุงทางเทคนิคหลายอย่างที่ออกแบบมาเพื่อปรับปรุงเวิร์กโฟลว์ที่ซับซ้อน ฟีเจอร์ Keyframe Cropping ใหม่ช่วยให้ควบคุมการจัดรูปแบบวิดีโอได้อย่างแม่นยำโดยให้ผู้ใช้อัปโหลดเฟรมแรกและสุดท้าย ระบุพารามิเตอร์การครอป และสร้างวิดีโอที่เข้ากับข้อกำหนดที่แน่นอน การปรับปรุงเหล่านี้ร่วมกับความเที่ยงตรงในการเคลื่อนไหวที่ปรับปรุงแล้วและการเข้าถึงโมเดลที่ขยายออกไป ทำให้ Adobe Firefly มีตำแหน่งเป็นคู่แข่งที่จริงจังในตลาดการสร้างวิดีโอ AI ระดับมืออาชีพ ท้าทายคู่แข่งโดยตรงในขณะที่รักษาข้อได้เปรียบด้านการรวมระบบของระบบนิเวศการสร้างสรรค์ของ Adobe