CGI และ Deepfake: วิธีการทำงานและวิธีการทำด้วยมือถือของคุณ

CGI และ Deepfake

ด้วยความก้าวหน้าทางเทคโนโลยีในปัจจุบันที่นำมาใช้กับโรงภาพยนตร์โทรทัศน์หรือการโฆษณาทำให้สามารถบรรลุสิ่งที่เหลือเชื่อได้ ความก้าวหน้าเหล่านี้และความเคลื่อนไหวล่าสุดใน ภาคโสตทัศนศึกษา ทำให้เป็นแฟชั่นอีกครั้งที่จะพูดถึงองค์ประกอบที่ผิดพลาดโดยสิ้นเชิงที่สร้างขึ้นโดยคอมพิวเตอร์การเปลี่ยนใบหน้าหรือแม้แต่การฟื้นฟูนักแสดงเพื่อให้พวกเขาดูอ่อนกว่า 30 ปี วันนี้เราต้องการพูดคุยกับคุณและชี้แจงข้อสงสัยบางประการเกี่ยวกับ สองเทคนิคยอดนิยมในเรื่องนี้ ภาค: CGI และ deepfakes .

CGI vs DeepFake: อะไรคืออะไรและแตกต่างกันอย่างไร

แม้ว่าในช่วงไม่กี่ปีที่ผ่านมาการพูดคุยเกี่ยวกับหัวข้อนี้จะได้รับความนิยมอย่างมาก แต่เทคนิคเหล่านี้ (โดยเฉพาะ CGI) เป็นสิ่งที่ถูกนำมาใช้ในภาพยนตร์โทรทัศน์และการโฆษณาเป็นเวลานาน แต่แน่นอนว่าการที่ประชาชนไม่รู้เทคนิคเหล่านี้มักจะทำให้เกิดความสับสนหรือแม้แต่คิดว่าเป็นเพียง“ สิ่งที่ทำด้วยคอมพิวเตอร์” ความจริงก็คือองค์ประกอบเหล่านี้แตกต่างกันโดยสิ้นเชิง แต่สามารถเสริมกันได้

ในอีกด้านหนึ่งเรามี CGI เทคนิคหรือ "Computer Generated Imagery" หรือที่เรียกว่าภาพที่สร้างด้วยคอมพิวเตอร์ กราฟิกประเภทนี้ไม่ว่าจะเป็น 3 มิติหรือ 2 มิติมักใช้ในงานศิลปะภาพยนตร์รายการโทรทัศน์และโฆษณาหรือวิดีโอเกม

ด้วยการอ้างอิงถึงภาพยนตร์และโทรทัศน์ CGI มักถูกใช้เพื่อสร้างฉากใหม่ซึ่งในหลาย ๆ กรณีจะเป็นเช่นนั้น แพงกว่ามากที่จะสร้างในชีวิตจริง มากกว่าการสร้างด้วยเทคนิคการประมวลผลขั้นสูงด้วยคอมพิวเตอร์ แต่ถ้าถ่ายให้สุดมันก็มีฉากที่ถ้าไม่ใช่ CGI ก็มี ฉากที่ไม่สามารถรับได้ มิฉะนั้นเช่นนักแสดงหรือนักแสดงหญิงผู้ล่วงลับปรากฏในภาพยนตร์หรือซีรีส์ ตัวอย่างของ CGI อาจเป็นคอมพิวเตอร์ที่สร้างกราฟิกสำหรับซีรีส์ยอดนิยม The Mandalorian

บนมืออื่น ๆ , Deepfake เทคนิคเป็นคำย่อในภาษาอังกฤษที่เกิดจากการรวมกันของคำ เทียม (“ เท็จ” ในภาษาสเปน) และ การเรียนรู้ลึก ๆ (“ การเรียนรู้เชิงลึก” ในภาษาสเปน) นี่เป็นเทคนิคที่ดำเนินการโดยคอมพิวเตอร์ปัญญาประดิษฐ์ซึ่งมักใช้ในภาพยนตร์หรือโทรทัศน์เป็นหลักเพื่อแทนที่ใบหน้าทำให้ดูอ่อนเยาว์หรืออายุมากขึ้นด้วยวิธีที่สมจริงเป็นพิเศษ เป็นความจริงอีกครั้งสิ่งที่ทำด้วยคอมพิวเตอร์ แต่เทคนิคนี้ต้องใช้แหล่งข้อมูลจริง 2 แหล่งในการใช้งาน

เพื่อให้เราทุกคนเข้าใจได้ดีและอธิบายอย่างง่าย ๆ ผ่านไฟล์ การใช้ AI และการจดจำใบหน้า คุณลักษณะทั้งหมดของแบบจำลอง "A" จะได้รับการวิเคราะห์ตามที่เราต้องการตัวอย่างเช่นเพื่อแทนที่ใบหน้าด้วยบุคคลอื่น ตอนนี้ด้วยโมเดล“ B” ของเราซึ่งใบหน้าของเราได้รับการคัดเลือกให้มาแทนที่เราจำเป็นต้องสร้าง“ ฐานข้อมูล” ของแต่ละลักษณะใบหน้าของเขาด้วยวิดีโอหรือภาพถ่ายหลาย ๆ มุมที่แตกต่างกัน เมื่อดึงข้อมูลทางสัณฐานวิทยาทั้งหมดออกจากใบหน้าของวัตถุ B แล้วการจัดตำแหน่งของใบหน้าของวัตถุ A จะดำเนินการเพื่อ "แก้ไข" ใบหน้าของเขาในทุกมุมที่เป็นไปได้ เมื่อทราบคุณสมบัติของทั้งสองรุ่นแล้วการจัดตำแหน่งของใบหน้าทั้งสองจะดำเนินการโดยใช้เทคนิคคอมพิวเตอร์ทำให้ได้ผลลัพธ์ที่คล้ายกับหน้ากากบนใบหน้าของตัวแบบ A เพื่อให้งานเสร็จแม้ว่ากระบวนการทั้งหมดนี้จะมีมากขึ้น ลึกซึ้งองค์ประกอบและ vfx ถูกใช้เพื่อ "กำจัดส่วนเกิน"

พื้นที่ ผลลัพธ์สุดท้าย หากทำอย่างถูกต้องอักขระ A นั้นมีความคล้ายคลึงกันอย่างมาก (ในแง่ของสัณฐานวิทยาของใบหน้าของเขา) กับ B ตัวอย่างของ deepfake อาจเป็นตัวอย่างในภาพต่อไปนี้ซึ่งถูกแทนที่ด้วยใบหน้าของ แจ็คนิโคลสันใน“ The Shining” โดยหนึ่งในนักแสดงจิมแคร์รี่

CGI และ Deekfake ที่ได้รับความนิยมมากที่สุด

ตอนนี้คุณได้ทราบข้อมูลเพิ่มเติมเกี่ยวกับเทคนิคยอดนิยมที่ใช้ในภาพยนตร์โทรทัศน์และสื่ออื่น ๆ อีกมากมายเราอยากจะแสดงให้คุณเห็น CGI และ deepfakes ยอดนิยม ของช่วงเวลานี้ บางคนได้รับการวิพากษ์วิจารณ์ค่อนข้างมากและตอนนี้เราอธิบายว่าทำไม

CGI ที่วิพากษ์วิจารณ์ของ The Mandalorian

ลุคสกายวอล์คเกอร์ - The Mandalorian

ดังที่เราได้กล่าวไปแล้วสองสามบรรทัดที่ผ่านมาการใช้เทคนิค CGI ในโรงภาพยนตร์เพื่อใช้ตัวละครเป็นลำดับของวัน และพวกเขาก็ทำเช่นนั้นในตอนสุดท้ายของ แมนดาโลเรียน 2 ด้วยการปรากฏตัวอีกครั้งของไฟล์ ลุคสกายวอล์คเกอร์ที่อายุน้อยมาก .

ไม่มีแถลงการณ์อย่างเป็นทางการจากดิสนีย์ที่อธิบายถึงขั้นตอนต่างๆที่ตามมาสำหรับฉากเหล่านี้ แต่สิ่งที่เห็นได้ชัดก็คือพวกเขาไม่ได้รับการขัดเกลาเท่าที่ควร (และอื่น ๆ อีกมากมายที่ต้องรู้งบประมาณที่จัดการ)

หลังจากแฟน ๆ รู้สึกอิ่มเอมใจหลังจากได้เห็นหนึ่งในตัวละครที่พวกเขาชื่นชอบ“ กลับมามีชีวิต” ด้วยการปรากฏตัวในยุค 70 การวิพากษ์วิจารณ์ถึงความไม่สมจริงที่มีในฉากเหล่านี้ใช้เวลาไม่นาน

ผู้สร้าง แซม & นิโก ที่ YouTube ช่องที่เชี่ยวชาญด้านการตัดต่อวิดีโอและเทคนิคพิเศษตัดสินใจที่จะพยายามปรับปรุงฉากเหล่านี้และทำ

ดังที่พวกเขาอธิบายในวิดีโอของพวกเขา วิเคราะห์การเคลื่อนไหวและลักษณะใบหน้าอย่างละเอียด (พร้อมกับ ข้อผิดพลาดเกี่ยวกับแสงและพื้นผิว ที่พวกเขาแสดงความคิดเห็นเกี่ยวกับคลิปที่ลุคปรากฏ) จากนั้นดึงที่เก็บถาวรพวกเขาวิเคราะห์วิดีโอและรูปถ่ายของตัวละครจำนวนมากเมื่อเขามีลักษณะที่ต้องการ หลังจากการวิเคราะห์ทั้งหมดนี้และด้วยความช่วยเหลือของทีมที่มีประสิทธิภาพสูงในการประมวลผลทุกอย่างพวกเขาใช้ประโยชน์จากไฟล์ เทคนิค Deepfake เพื่อวางหน้ากากลุคสกายวอล์คเกอร์บนฉากที่สร้างโดยดิสนีย์ใน The Mandalorian

ผลลัพธ์ของคุณดีขึ้นหรือไม่? คุณสามารถตัดสินด้วยตัวคุณเองโดยดูวิดีโอของเขา แต่ในความเห็นของเราการปรับปรุงนั้นน่าทึ่งมาก

CGI ของ Will Smith ในราศีเมถุน

อีกกรณีหนึ่งที่ได้รับความนิยมมากที่สุดในการประยุกต์ใช้เทคนิคเหล่านี้ในช่วงไม่กี่ปีที่ผ่านมาคือในภาพยนตร์ เมถุน . ในนั้นเราจะเห็นวิลสมิ ธ วัย 51 ปีต่อสู้กับ“ วิล” อีกคนในวัย 23 ปี

อีกครั้ง การสร้างกราฟิกผ่านคอมพิวเตอร์ พร้อมด้วย เทคนิคการจดจำใบหน้าและ AI ช่วยให้เราวิเคราะห์ลักษณะใบหน้าของนักแสดงแต่ละคนในปี 2019 จากนั้นรวมเข้ากับรูปลักษณ์ของเขาเมื่อเขาอายุเพียง 20 ปี โชคดีที่ Will Smith มีคลังฉากจำนวนมากในช่วงเวลานี้เช่นเดียวกับในภาพยนตร์ ตำรวจกบฏสองคน ,หรือ ชายในชุดดำ .

วิลล์อธิบายส่วนหนึ่งของกระบวนการ (แสดงภาพเบื้องหลังมากมาย) ในวิดีโอบนช่อง YouTube ของเขา

Deepfake ถึง Lola Flores

โฆษณาล่าสุดจาก บริษัท ผู้ผลิตเบียร์ Cruzcampo ไม่สามารถขาดไปได้เป็นตัวอย่างที่ชัดเจนซึ่งโดยใช้เทคนิค Deepfake นักร้องยอดนิยมโลล่าฟลอเรสฟื้นคืนชีพ .

หากคุณต้องการทราบรายละเอียดว่าเทคนิคนี้ใช้ในการสร้างโฆษณาได้อย่างไร จุด, ในช่อง YouTube เอง บริษัท ได้บอกขั้นตอนนี้ในวิดีโอ

ยุคมือถือ: แอพสำหรับสร้าง Deepfakes ด้วยมือถือของคุณ

ดังที่เราได้กล่าวไว้ในตอนต้นของบทความนี้เทคโนโลยีก้าวหน้าไปอย่างก้าวกระโดดและสิ่งต่างๆที่ก่อนหน้านี้เราต้องการอุปกรณ์ที่ทรงพลังอย่างมากตอนนี้เราสามารถทำได้ด้วยโทรศัพท์มือถือของเรา

พื้นที่ Deepfakes เทคนิคเป็นอีกตัวอย่างหนึ่งของสิ่งนี้ มีหลากหลาย การใช้งาน ที่ช่วยให้เราสามารถถ่ายเซลฟี่และวางใบหน้าของเราบนตัวละครที่มีชื่อเสียงระดับโลกในเวลาเพียงไม่กี่วินาทีเช่น แฮร์รี่พอตเตอร์ , Shakira หรือกัปตัน Jack Sparrow , หมู่คนอื่น ๆ อีกมากมาย

อย่างที่คุณสามารถจินตนาการได้ว่าสิ่งเหล่านี้เป็นแบบจำลองสำเร็จรูปซึ่งมีการคำนวณน้อยกว่าที่ทำในภาพยนตร์หรือในทีวีทำให้เราสามารถวางใบหน้าของเราไว้ในรูปแบบที่เรียบง่าย แต่มีประสิทธิภาพมาก เราจะไม่หลอกใคร แต่โพสต์บนโซเชียลเน็ตเวิร์กหรือหัวเราะก็เกินพอแล้ว

ตัวอย่างของสิ่งนี้คือ รีเฟซ แอป ดังที่เรากล่าวไปแล้วมันง่ายมากเพียงแค่ทำตามขั้นตอนที่แอปพลิเคชันกำหนดและหลังจากถ่ายภาพเซลฟี่และวิเคราะห์แล้วเราสามารถเปลี่ยนใบหน้าของเราแทนตัวละครที่รู้จักกันดีในประเภทต่างๆได้ แน่นอนเราเตือนคุณแล้วว่าหากคุณต้องการสนุกกับแอพนี้อย่างละเอียดคุณจะต้องจ่าย

อีกตัวอย่างหนึ่งคือแอปพลิเคชัน iface มีให้สำหรับ Apple โทรศัพท์ การดำเนินการจะเหมือนกับการดำเนินการก่อนหน้านี้:

  • เราเริ่มแอพ
  • เขาขอให้เราถ่ายเซลฟี่เพื่อวิเคราะห์
  • เราเลือกจากโมเดลฟรีที่แคตตาล็อกของพวกเขามีและเพียงไม่กี่วินาทีเราก็มีใบหน้าของเราเป็นของนักแสดงนักร้องหรือบุคคลสาธารณะที่มีชื่อเสียง

แต่อีกครั้งเราจะต้องไปที่จุดชำระเงินเพื่อใช้ประโยชน์จากทุกรุ่นของแอปพลิเคชันนี้