Bagaimana teknologi bahasa alami, hologram menjaga kesaksian holocaust

Pada 1990-an, USC Shoah Foundation melakukan wawancara video dengan ribuan korban Holocaust, sehingga kisah mereka tidak pernah terlupakan. Perpustakaan digital nirlaba saat ini menampung 53.000 kesaksian video, dan dalam beberapa tahun terakhir telah berkembang untuk menangkap kesaksian dari mereka yang menyaksikan Genosida Tutsi Rwanda 1994, Pembantaian Nanjing 1937, dan Genosida Armenia yang bertepatan dengan Perang Dunia I.

Tetapi di era yang menyaksikan munculnya realitas virtual dan augmented, belum lagi robot dan asisten virtual, organisasi ini telah mengeksplorasi cara-cara yang lebih modern untuk menangkap kesaksian: representasi para penyintas yang interaktif dan mirip hologram yang dapat berinteraksi dengan dan menjawab pertanyaan dari generasi masa depan.

Yayasan ini bekerja sama dengan Institut Teknologi Kreatif (TIK) USC dan Tampilan Nurani pada proyek tersebut, yang dikenal sebagai Dimensi Baru dalam Kesaksian. Sudah ada dalam karya sejak 2012, dan pada akhirnya akan tersedia di museum dan lembaga pembelajaran di seluruh dunia. PCMag melakukan perjalanan ke Playa Vista, California, baru-baru ini untuk menonton orang yang selamat dari Auschwitz Eva Kor memberikan kesaksiannya di panggung musik.

Kepala proyek Dr. Stephen D. Smith, direktur eksekutif Yayasan USC Shoah, mengatakan ia "ingin kesempatan untuk berbicara dengan orang-orang yang pernah mengalami genosida sendiri, untuk mendengar langsung dari para saksi, daripada melihat mereka ditugaskan untuk menjadi statistik sejarah.."

Selama lima hari tim Smith mewawancarai Kor, yang berusia delapan tahun ketika Perang Dunia II dimulai. "Melalui rekaman tanggapannya, kita dapat menciptakan sumber daya kehidupan untuk generasi mendatang, " katanya.

Heather Maio, direktur pelaksana Conscience Display, telah bereksperimen dengan berbagai teknologi untuk museum dan lingkungan pendidikan untuk berbagi sejarah sebelum ia belajar tentang pekerjaan di ICT.

"Saya sudah melakukan tes dengan 3D - menggunakan dua pengaturan kamera - tapi saya benar-benar mencari teknologi yang paling jauh dalam teknologi tipe holografik. Saya menemukan ICT pada 2010 dan membawa seluruh proyek ke USC Shoah Foundation."

Maio ingin melampaui kesaksian naratif tradisional dan memutuskan untuk meneliti pemrosesan bahasa alami sehingga pengunjung museum dapat berdialog dengan saksi yang direkam.

Sebagian besar pengenalan ucapan masih dalam pengembangan. "Kami telah terhubung ke ASR (Automatic Speech Recognition) Google, yang merupakan perangkat lunak bahasa terbaik di luar sana, khususnya karena ia memiliki kosakata dan frasa percakapan alami terbesar, dan memiliki pemahaman konteks, " kata Maio. "Tapi saksi kami menggunakan kata-kata, khususnya istilah Polandia dan Yiddish, yang kurang digunakan hari ini, dari era Perang Dunia II. Namun, saya perhatikan bahwa itu belajar dengan sangat cepat dan mengambil kata-kata baru, dan memahami lebih banyak setiap hari."

Sudah waktunya untuk masuk ke studio penangkapan digital. Seorang kru sedang menyiapkan anjungan besar, dengan latar belakang layar hijau menutupi dua pertiga ruang, sehingga orang yang diwawancarai nantinya dapat ditempatkan di lingkungan atau latar belakang apa pun.

Tim film dalam 360 derajat melalui rig dengan 112 kamera, kombinasi Ximea MQ042MG-CM, Red Epic M Dragons, dan Panasonic HC-X900s. "Ini adalah proyek yang kompleks, jadi TIK telah mengembangkan sistem khusus yang berjalan di atas Vegas Pro, oleh Sony, untuk proses pengeditan yang menggabungkan perangkat lunak yang dibuat oleh tim Bahasa Alam di TIK, " kata Maio.

Dengan semua orang di tempat, Eva Kor duduk di tengah pengaturan kamera. Eva dipilih karena dia mendirikan organisasi CANDLES (Anak-anak Korban Eksperimen Laboratorium Mematikan Auschwitz Nazi) pada tahun 1984 dan membuka Museum CANDLES pada tahun 1995. Sekarang berusia 83 tahun, dan masih tajam sebagai taktik, dia mendengarkan dengan seksama instruksi tentang cara jaga agar badannya tetap di posisi yang sama, sehingga digitalnya akan berlanjut di kemudian hari. Kemudian itu seperti set film nyata.

"Diam di set."

"Suara!"

"Gulung Panasonics."

"Memeriksa semua Panasonics!"

"Gulung Merah."

"Tolong, Slate."

Clapperboard membanting untuk memberi notasi pada tim edit, semua orang menatap naskah hari itu, dan Smith mencondongkan tubuh ke mikrofon di luar rig kamera.

"Apa yang orang tuamu katakan tentang Hitler dan Pendudukan?" Dia bertanya.

Kor menarik napas dalam-dalam, dan merinci bagaimana tentara Hongaria datang ke pertanian kecil keluarganya, di sebuah desa di Transylvania, Rumania.

Setelah akun saksi diletakkan, pemicu audio akan diterapkan sehingga audiensi masa depan dapat mengajukan pertanyaan dengan berbagai cara dan mendapatkan tanggapan yang meyakinkan dari Kor. Ini berarti Kor harus menjawab pertanyaan yang sama dengan berbagai cara, hanya untuk memastikan bahwa perangkat lunak mengkategorikan responsnya dengan benar dan menerapkan kata kunci dengan pemahaman semantik.

Pertanyaan yang paling menimbulkan emosi dari mereka yang menonton adalah pertanyaan yang akan diajukan anak-anak. Bahkan, mereka punya. 2.000+ pertanyaan berasal dari uji coba penelitian, dan banyak pertanyaan tentang detail kehidupan sehari-hari pada masa itu. Kor teringat kenangan masa kecilnya, tumbuh sebelum keluarganya dibawa ke Auschwitz. Dia menggambarkan masakan ibunya, masalah dengan intimidasi di sekolah, dan hewan peliharaan kesayangan saudara kembarnya Miriam.

Itu karena Eva dan Miriam kembar, dan jadi bagian dari eksperimen mengerikan yang dilakukan di kamp, ​​mereka berdua selamat. Seluruh keluarga terbunuh pada saat kedatangan.

Setelah rekaman satu jam, Kor butuh istirahat. Jadi, selama jeda dalam persidangan, Smith membawa kami ke ruang samping untuk menunjukkan kepada kami kesaksian yang lengkap. Output TIK memungkinkan orang yang diwawancarai untuk diproyeksikan dalam 2D ​​HD, 3D, dalam VR, atau melalui monitor layar atau perangkat apa pun.

Di laptop, Smith menarik jendela browser dan ada Pinchas Gutter, yang selamat dari Holocaust lainnya, tangannya bertumpu dengan lembut di kakinya, mata waspada, menunggu kami, sepertinya.

Smith meletakkan jarinya pada kunci laptop untuk memicu Gutter merespons. Wajah Talang menyala. Smith mengajukan pertanyaan, melepaskan jarinya, dan Gutter memberikan jawabannya, sama seperti jika dia duduk di sana di sebuah konferensi jarak jauh di kota lain.

Kami semua mengajukan pertanyaan - beberapa dari kami dengan kebangsaan kami yang berbeda dan dengan demikian aksen. Dia mendapat setiap orang dan memberikan jawaban yang meyakinkan. Itu menarik. Penangguhan keyakinan itu lengkap.

Eva Kor siap untuk 100 pertanyaan berikutnya di studio. Semua orang mengajukan kembali. Tapi yang luar biasa tentang proyek ini adalah Kor akan menjawab pertanyaan orang tentang apa yang terjadi padanya lama setelah dia meninggalkan kita di dunia fisik.