https://frosthead.com

Perangkat Lunak Baru Sebenarnya Dapat Mengedit Ekspresi Wajah Aktor

Mengambil gambar adegan dalam sebuah film bisa memerlukan puluhan pengambilan, terkadang lebih. Dalam Gone Girl, sutradara David Fincher dikatakan rata-rata 50 mengambil per adegan. Untuk aktor Jejaring Sosial Rooney Mara dan Jesse Eisenberg memerankan adegan pembuka 99 kali (disutradarai oleh Fincher lagi; tampaknya dia terkenal karena ini). Stanley Kubrick, The Shining, terlibat dalam 127 adegan terkenal di mana Wendy menaiki tangga mengayunkan tongkat bisbol ke Jack, yang secara luas dianggap sebagai adegan paling banyak diambil dari setiap film dalam sejarah.

Sebuah perangkat lunak baru, dari Disney Research bersama dengan University of Surrey, dapat membantu mengurangi jumlah yang diperlukan, sehingga menghemat waktu dan uang. FaceDirector memadukan gambar dari beberapa pengambilan, sehingga memungkinkan untuk mengedit emosi yang tepat pada wajah aktor.

"Memproduksi film bisa sangat mahal, jadi tujuan proyek ini adalah mencoba membuat proses lebih efisien, " kata Derek Bradley, seorang ilmuwan komputer di Disney Research di Zurich yang membantu mengembangkan perangkat lunak.

Disney Research adalah grup laboratorium penelitian internasional yang berfokus pada jenis inovasi yang mungkin berguna bagi Disney, dengan lokasi di Los Angeles, Pittsburgh, Boston, dan Zurich. Proyek terbaru termasuk robot panjat dinding, "buku mewarnai augmented reality" di mana anak-anak dapat mewarnai gambar yang menjadi karakter 3D bergerak pada aplikasi, dan rompi untuk anak-anak yang memberikan sensasi seperti getaran atau perasaan tetesan air hujan untuk berkorespondensi dengan adegan buku cerita. Tim di belakang FaceDirector bekerja pada proyek selama sekitar satu tahun, sebelum mempresentasikan penelitian mereka di Konferensi Internasional tentang Visi Komputer di Santiago, Chili Desember lalu.

Mencari tahu bagaimana menyinkronkan pengambilan yang berbeda adalah tujuan utama proyek dan tantangan terbesarnya. Aktor mungkin memiringkan kepala mereka pada sudut yang berbeda dari mengambil untuk mengambil, berbicara dalam nada yang berbeda atau berhenti pada waktu yang berbeda. Untuk mengatasi ini, tim membuat program yang menganalisis ekspresi wajah dan isyarat audio. Ekspresi wajah dilacak dengan memetakan landmark wajah, seperti sudut mata dan mulut. Program kemudian menentukan frame mana yang dapat masuk satu sama lain, seperti potongan puzzle. Setiap potongan puzzle memiliki banyak pasangan, sehingga seorang sutradara atau editor kemudian dapat memutuskan kombinasi terbaik untuk membuat ekspresi wajah yang diinginkan.

Untuk membuat bahan yang digunakan untuk bereksperimen, tim membawa sekelompok siswa dari Universitas Seni Zurich. Para siswa bertindak beberapa kali dalam dialog yang dibuat-buat, setiap kali melakukan ekspresi wajah yang berbeda — bahagia, marah, bersemangat, dan sebagainya. Tim kemudian dapat menggunakan perangkat lunak untuk membuat sejumlah kombinasi ekspresi wajah yang menyampaikan emosi yang lebih bernuansa — sedih dan sedikit marah, bersemangat tetapi takut, dan sebagainya. Mereka mampu memadukan beberapa take — katakanlah, ketakutan dan netral — untuk menciptakan emosi yang naik turun.

Tim FaceDirector tidak yakin bagaimana atau kapan perangkat lunak mungkin tersedia secara komersial. Produk ini masih berfungsi dengan baik bila digunakan dengan adegan yang difilmkan sambil duduk di depan latar belakang statis. Aktor yang bergerak dan pemandangan luar ruangan yang bergerak (pikirkan pohon yang bergoyang, mobil yang lewat) menghadirkan lebih banyak tantangan untuk sinkronisasi.

Perangkat Lunak Baru Sebenarnya Dapat Mengedit Ekspresi Wajah Aktor