Maju cepat: bintang ini berbicara dengan Google Glass, membantu anjing berbicara

Saya berada di Austin, Texas, bulan lalu untuk SXSW Interactive, di mana saya memiliki kesempatan untuk duduk bersama sejumlah eksekutif industri teknologi untuk seri video Fast Forward saya, termasuk Chris Becherer, Wakil Presiden Produk di Pandora.

Dalam edisi Fast Forward ini, kita berbicara dengan Thad Starner, Profesor Komputasi di Georgia Tech. Thad adalah pemimpin teknis pada sebuah proyek yang akhirnya membawa dunia ke Google Glass, yang ia kenakan selama obrolan kami. Tapi dia sudah berada di ruang yang bisa dipakai lebih lama dari itu, dan karyanya berfokus pada sifat antarmuka manusia-mesin. Karyanya yang terbaru melibatkan membangun pakaian yang bisa membaca pikiran untuk anjing. Lihat obrolan kami di video dan transkrip di bawah ini.

Dan Costa: Ini adalah SXSW yang sibuk. Ada banyak pembicaraan tentang augmented reality. Ada banyak pembicaraan tentang realitas virtual. Produk pakaian masih merupakan topik yang sangat panas. Ketika kebanyakan orang memikirkan produk yang dapat dikenakan, mereka memikirkan Google Glass atau Fitbit yang Anda kenakan di pergelangan tangan Anda untuk melacak langkah Anda. Ketika Anda memikirkan produk yang dapat dikenakan, bagaimana menurut Anda?

Thad Starner: Ya, bagi saya ini adalah komputer apa saja, perangkat apa pun yang dikenakan di tubuh yang membantu Anda saat Anda melakukan beberapa tugas utama lainnya. Ini semua komputer yang dikenakan di tubuh yang dirancang untuk menjadi yang kedua. Ini membantu Anda untuk beberapa tugas utama lainnya, seperti menjawab pertanyaan selama wawancara.

Catatan saya ada di mini iPad saya. Saya harus terus melihat ke bawah untuk mendapatkan catatan terbaru dan untuk mendapatkan judul Anda yang benar. Anda memiliki hak itu sendiri.

Iya. Yang harus saya lakukan adalah melirik, mengambil beberapa kata dan kembali ke percakapan. Sistem lama saya, saya tidak tahu apakah Anda melihat beberapa foto lama saya, tetapi sistem lama saya memiliki layar di sini. Faktanya, ada satu dari 1997 di mana itu bahkan di lensa. Itu dibuat oleh sebuah perusahaan bernama Micro Optical pada saat itu. Itu sebenarnya memungkinkan Anda untuk menjadi cukup gesit dengan memiliki asisten yang cerdas yang dapat membantu Anda dari detik ke detik. Itu benar-benar mengubah kepercayaan diri Anda dan mengubah kemampuan Anda untuk melakukan hal-hal yang mungkin Anda alami.

Anda adalah salah satu kru asli. Sepertinya kalian hampir berkompetisi untuk melihat siapa yang bisa membangun sistem wearable paling keren, paling canggih, paling fungsional.

Saya mulai membuat sistem saya kembali pada tahun 1990, tetapi saya gagal berulang kali. Baru pada tahun '93 saya akhirnya memiliki sistem yang dapat saya pakai dalam kehidupan sehari-hari. Saat itu, saya bekerja di perusahaan bernama BBN. Mereka membantu membuat router pertama untuk internet. Setelah saya memakai perangkat, saya menyadari dalam sebulan bahwa itu bukan hanya riset yang bagus. Itu adalah gaya hidup yang baik.

Tentang apa perangkat ini. Ini menciptakan gaya hidup pembunuh untuk Anda. Tentu saja, saat itu saya memiliki koneksi ponsel untuk internet yang diukur dalam kaki, tidak dalam kecepatan bit. Dengan kata lain, berapa kaki saya bisa berjalan sebelum panggilan telepon seluler analog turun dan saya harus memanggil ulang koneksi?

Akhirnya, saya kembali ke MIT Media Lab dan mulai merekrut semakin banyak siswa yang tertarik dengan hal ini. Kami memiliki konvoi kecil orang yang membuat perangkat untuk kebutuhan khusus mereka dan kami menemukan cara untuk hidup sebagai komunitas cyborg. Itu mengubah apa yang kami pikirkan tentang teknologi. Saya akan memberi Anda sebuah contoh: Misalkan Anda datang sebagai VIP untuk mengunjungi lab. Kami akan meminta satu orang berbicara dengan Anda tentang minat Anda. Sementara itu terjadi, akan ada pesan bolak-balik antara bola mata dari anggota lain dari kelompok yang mencoba merencanakan hari Anda. "Oh, dia sangat tertarik pada indera yang diperbesar. Jadi kamu bawa dia untuk makan siang. Aku harus pergi ke dokter janji di tiga, jadi aku akan mendapatkan dia di dua." Jadi, Anda memiliki orang-orang ini mengetik di keyboard mereka mengirim pesan satu sama lain sementara percakapan sedang mencoba untuk menjadwalkan hari berdasarkan minat Anda. Semacam sampai ke tahap telepati.

Seringkali kedengarannya sangat mirip dengan Slack, di mana kita memiliki komunikasi waktu nyata dan berbagai segmen terbentuk. Tetapi alih-alih menjadikannya berbasis terminal dan membuatnya terhubung ke komputer, di mana Anda harus berada di depan laptop atau telepon Anda, itu ada di mana pun Anda berada. Anda bisa melakukan dua hal sekaligus. Anda dapat mengobrol dan menjadwalkan makan siang.

Ya, tidak, kamu tidak mau melakukan itu. IQ Anda turun 40 poin ketika Anda mencoba melakukan itu. Yang ingin Anda lakukan adalah membuat komputer mendukung percakapan. Sebagai contoh, kami memiliki sistem yang disebut Agen Pengingat yang memiliki sedikit mikrofon peredam bising, mendengarkan percakapan saya dan semua yang saya katakan akan ditranskripsikan dan dimasukkan ke dalam buffer teks. Dan kemudian komputer terus mencari email sebelumnya, makalah sebelumnya, percakapan sebelumnya yang mungkin berhubungan dengan apa yang kita bicarakan. Ini menarik sedikit pengingat di layar saya detail yang mungkin ingin saya sertakan dalam percakapan ini. Jadi itu mendukung pembicaraan, memberi saya informasi.

Saya memiliki seorang siswa yang berbicara kepada saya tentang pengenalan suara - bagaimana Anda ingin menggunakan pengenalan suara dengan pakaian yang bisa dikenakan. Dan saya berkata, baik jika Anda benar-benar ingin melakukan itu, Anda harus - dan saya menarik catatan saya saat kami sedang berbicara - saya katakan kepadanya, Anda harus benar-benar melihat pembicaraan Steve Whittaker tentang Filochat dari tahun 1995. Saya percaya dia memiliki beberapa perincian tentang bagaimana 93 persen hari orang dihabiskan dalam komunikasi oportunistik. Saya memberinya semua detail ini. Murid saya hanya menatap saya seperti "bagaimana Anda tahu semua ini?" Semua ada di sini. Saya cukup tahu untuk mencari Steve Whittaker dan kemudian komputer memberi saya semua detail. Memiliki dukungan semacam itu secara real-time benar-benar luar biasa.

Kami juga pernah melakukannya sebelum di mana saya memberikan kesaksian di National Academy of Sciences di Washington, DC tentang menambah manusia. Saya menunjukkan kepada mereka apa yang saya lakukan. Saya memiliki murid-murid saya, mahasiswa pascasarjana saya, di Georgia Tech - jadi saya berada di DC, murid-murid saya di Georgia Tech mendengarkan dan juga saya menunjukkan kepada semua orang bahwa saya memiliki umpan balik langsung kepada Georgia Tech. Saya memasang catatan presentasi dan catatan siswa saya yang mereka sarankan secara real-time.

Jadi ketika saya bersaksi, mereka berkata, "Oh, Anda harus membicarakan ini, " dan mereka akan melemparkan saya sebuah URL, "Atau Anda harus membicarakan ini" dan melemparkan barang-barang, memberikan informasi lain. Panel yang mewawancarai saya, mereka mulai bertanya kepada para siswa, bukan saya.

Saya hanya tipe orang berwajah saja untuk semua pengetahuan tentang konsorsium orang-orang di lab ini yang dapat dengan cepat menjawab pertanyaan karena mereka adalah ahli di bidangnya. Tetapi mereka bisa mencari informasi jauh lebih cepat daripada saya. Mereka hanya menggunakan saya untuk berbicara. Kolektif intelektual ini, kemampuan untuk pergi ke para ahli, bisa membantu Anda keluar pada saat itu juga, adalah hal yang sangat kuat. Di sisi lain, jika Anda mencoba mengatakan "Baca email" saat berbicara, Anda terdengar seperti orang idiot. Manusia tidak bisa melakukan banyak tugas dengan sangat baik.

Ini bukan multi-tasking. Benar-benar augmentasi.

Baik.

Sepertinya sifat menjadi cerdas, sifat pengetahuan, sifat kecerdasan telah berubah. Anda dulu harus menghafal semua hal ini untuk melakukan percakapan dengannya tanpa merujuk pada catatan Anda, dan itu bukan paradigma lagi. Anda hanya perlu tahu pertanyaan apa yang harus diajukan dan terhubung ke sistem yang dapat memberikan jawaban itu kepada Anda.

Ada sejumlah informasi yang Anda butuhkan untuk diinternalisasi sehingga Anda dapat mencarinya dengan cepat dan dapat berpikir di bidang-bidang tersebut, tetapi untuk banyak hal lainnya, Anda hanya ingin pengetahuan dunia ada di ujung jari Anda dan membawanya disampaikan ketika kamu membutuhkannya Gagasan pengambilan informasi tepat waktu ini sangat kuat. Itulah yang saya pikir akan terjadi dalam lima atau 10 tahun ke depan. Kita akan memiliki asisten cerdas yang dapat membantu kita berdasarkan detik demi detik.

Itulah salah satu hal hebat tentang komputer yang dapat dipakai. Apa yang saya pikir mendefinisikan komputer yang dapat dipakai adalah bahwa itu adalah sesuatu di mana komputer menjadi bagian dari kita. Anda mungkin pernah menggunakan teropong sebelumnya? Ini adalah sesuatu yang Anda ambil. Anda melihat sesuatu di kejauhan. Anda menyesuaikan fokus. Mereka agak rewel, kan? Anda harus memegangnya dengan tepat dan menyesuaikan fokus setiap kali Anda mengubah dari satu subjek ke subjek lainnya. Anda meletakkannya, atas dan ke bawah. Anda tidak menganggap teropong sebagai bagian dari diri Anda. Tapi kacamata Anda, Anda pakai, dan Anda menggunakannya sepanjang hari. Anda melihat melalui mereka. Anda tidak memikirkan mereka. Anda cukup menggunakannya. Jadi, apa yang kita miliki sekarang dengan sebagian besar perangkat ini, sebagian besar komputer ini, smartphone kita, tablet kita; mereka bukan bagian dari kita. Mereka yang lain.

Segera setelah Anda mendapatkan perangkat dekat dengan tubuh, tiba-tiba teknologi keluar dari jalan. Itulah paradoks komputer yang bisa dipakai. Dengan mendekatkan teknologinya ke tubuh, teknologi itu membuatnya terhalang. Saya pikir di situlah kita akan pergi di masa depan. Kita akan melihat semakin banyak cara bagi teknologi untuk membantu kita, menjadikan kita lebih kuat, lebih mandiri, lebih percaya diri, dan lebih banyak informasi berdasarkan sepersekian detik demi detik. Saya ingin melihat asisten cerdas ini beralih dari sesuatu yang Anda ajak bicara; untuk sesuatu yang merupakan bagian dari Anda. Sesuatu yang membantu Anda dari satu saat ke saat berikutnya dengan sangat proaktif.

Saya pikir konsep mengalami dunia melalui teknologi sebagai lawan dari hanya menggunakan teknologi, adalah perbedaan penting.

Itulah pengalaman yang telah saya upayakan. Banyak dari itu hanyalah kecepatan akses. Larry Page berkata kepada saya, "Ini semua tentang mengurangi waktu antara niat dan tindakan." Saya tertegun. Saya telah mencoba mengartikulasikan pentingnya kecepatan akses suatu perangkat. Di sini dia melakukannya dalam satu kalimat. Waktu antara niat dan tindakan sangat penting.

Salah satu demo yang saya lakukan adalah meminta semua orang menyelesaikan dua tugas. Saya minta mereka mengangkat tangan setelah mereka menyelesaikan setiap tugas. Jadi, saya akan mengatakan sesuatu seperti, "Oke, jam berapa sekarang?" Saya akan mengangkat tangan saya karena waktu saya ada di depan layar saya sekarang, dan audiens saya juga menyelesaikan tugas dengan sangat cepat. Kemudian, tugas kedua yang saya lakukan adalah menjawab pertanyaan seperti "di mana Gunung Pinatubo?" Saya dapat mengangkat tangan saya karena mengajukan pertanyaan memberi saya jawaban di layar saya sekarang. Itu di Filipina, dan faktanya, saya punya sedikit peta di mana itu sekarang di layar saya.

Sangat sulit bagi audiens saya untuk mendapatkan informasi itu dengan cepat sehingga mereka bahkan tidak repot melakukannya. Saya berbicara tentang pemirsa teknis seperti Xerox Park atau Georgia Tech atau Stanford. Jadi di sinilah saya, dalam audiensi yang penuh dengan kutu buku, melakukan percobaan dengan mereka dan kebanyakan dari mereka bahkan tidak repot-repot mencoba untuk mendapatkan informasi itu karena mereka tahu itu akan memakan waktu terlalu lama.

Bagaimana jika kita dapat mengubahnya dari sesuatu yang terlalu lama menjadi sesuatu yang semudah memeriksa waktu. Tiba-tiba, Anda membuat orang jauh lebih kuat. Jika Anda dapat mengurangi waktu niat untuk bertindak dalam waktu dua detik atau kurang, tiba-tiba orang akan melakukannya tanpa memikirkannya. Itu bagian dari mereka. Setelah melampaui dua detik, itu menggunakan turun secara eksponensial dan orang-orang berpikir sebagai "orang lain."

Sebelum kami mulai merekam, kami berbicara tentang orang-orang kudus pelindung. Dan kami mencoba untuk mencari tahu Santo Saintislislite yang menjadi santo pelindung. Saya memiliki tablet yang terhubung ke internet. Saya menginginkan informasi itu. Tapi saya tidak repot membuka Google, mengetik, dan mencarinya karena saya tidak terlalu peduli. Tetapi hanya dengan memiliki percakapan itu, itu muncul di layar Anda.

Maksud saya, saya memilikinya di sini. Saya hanya bertanya. Ini lebih eksplisit. Saya hanya bertanya, "Santo Stanislaus adalah santo pelindung?" - jawabannya adalah Polandia - dan kemudian muncul beberapa detik kemudian. Cukup kuat. Ini mengurangi semacam keengganan untuk mencoba dan menemukan informasi tentang hal itu di dunia. Ini bagus untuk saya sebagai seorang profesor karena itu membuat saya tampak lebih pintar daripada saya.

Ini adalah sesuatu yang terjadi ketika saya masih mahasiswa di MIT. Saya mengambil kelas dari Justine Cassell, dan itu tentang sikap . Selama ujian sebelum ujian akhir, dia bertanya, "Apa pentingnya Deixis?" Saya memiliki semua catatan kelas di komputer saya, dan saya dapat mengaksesnya dengan sangat cepat dengan keyboard ini. Itu sebelum pengenalan ucapan menjadi sangat baik. Apa yang akan saya lakukan adalah menyusun kalimat saya sehingga saya bisa menemukan jawabannya tepat waktu untuk menyelesaikan kalimat.

Jadi saya mengangkat tangan untuk menjawab pertanyaan itu. Dia memanggil saya. Saya berkata, "Di awal kelas, kami mengatakan pentingnya deiks adalah uh, uh, uh, um, " karena saya membuat kesalahan. Saya menjatuhkan keyboard saya. Saya masuk ke mode E-Mac yang salah. Saya berkata, "Saya harus kembali kepada Anda. Saya berada dalam mode yang salah."

Seluruh kelas tertawa terbahak-bahak. Mereka telah menghabiskan waktu dengan saya dan tidak menyadari bahwa saya melakukan ini setiap hari. Seorang profesor yang membawa kelas bersama saya membungkuk dan berkata, "Sekarang saya ingin satu. Anda melakukan ini sepanjang waktu, bukan? Anda dapat memperoleh informasi dengan sangat cepat. Sepertinya itu bagian dari diri Anda." Ya, itulah alasan saya melakukan itu.

Sungguh menakjubkan bahwa para profesor dan mahasiswa yang telah bekerja dengan saya selama bertahun-tahun tidak pernah menyadari betapa banyak bantuan yang diberikan alat ini kepada saya. Pertama kali saya memberikan ceramah profesional, salah satu siswa senior datang dan berkata kepada saya, "Itu adalah pembicaraan terbaik yang pernah saya dengar dari Anda, tetapi mengapa Anda menggunakan komputer Anda?"

Dia tidak tahu bahwa sementara kebanyakan orang memiliki kartu indeks 3-oleh-5, saya memilikinya di sini. Memiliki bantuan semacam itu membuat saya menjadi pembicara yang lebih baik. Itu hanya mengejutkan bagi orang-orang pada saat itu bahwa Anda dapat menggunakan mesin Anda dengan cara ini.

Jadi, mari kita membuat poros kecil. Kami sudah bicara banyak tentang barang yang bisa dipakai manusia. Anda bekerja dengan anjing sekarang. Jelaskan pekerjaan yang Anda lakukan.

Proyek ini disebut FIDO, Fasilitasi Interaksi untuk Anjing dengan Pekerjaan. Ya, ini adalah akronim, tapi itu lucu. Idenya adalah ada semua anjing yang bekerja di luar sana. Anjing yang merupakan anjing waspada alergi atau anjing waspada medis, pencarian dan penyelamatan, deteksi bom, inspeksi untuk TSA untuk barang selundupan atau pertanian. Anjing-anjing ini melakukan banyak pekerjaan, tetapi mereka memiliki waktu yang sangat sulit untuk mengomunikasikan apa yang mereka rasakan dan apa yang mereka pikirkan kepada penangannya.

Kami memiliki salah satu pelatih kami beberapa tahun yang lalu untuk melakukan demonstrasi. Dia penderita diabetes dan salah satu dari orang-orang ini yang bisa pingsan karena kekurangan gula darah. Dia memiliki seekor anjing yang dilatih untuk bereaksi terhadap situasi siaga itu. Anjing pergi dan menemukan orang terdekat, meraihnya, dan mencoba membawanya ke dia karena dia akan segera pingsan.

Sebelum dia pingsan, ia pergi dan mendapat bantuan?

Iya. Ini sebenarnya bisa merasakan perubahan kimia tubuh dari bau , dan dapatkan bantuan. Ini terjadi di gerbang keamanan di Bandara Atlanta, dan anjing itu melakukan apa yang dilatih untuk dilakukan - naik pada petugas keamanan TSA. Petugas keamanan hanya mengira anjing itu ramah, tetapi pelatih kami berkata, "Aku akan pingsan sebentar lagi. Aku harus duduk." Anda dapat membayangkan akan jauh lebih baik jika anjing bisa berbicara.

Jadi, kami telah membuat rompi di mana anjing pergi dan menyampaikan peringatan dengan menarik rompi. Ketika sensor diaktifkan dan berkata, "Silakan ikuti saya. Pemilik saya membutuhkan bantuan Anda." Tentu saja, pertama kali Anda menguji ini, orang-orang berpikir mereka sedang dicoret, atau mereka hanya tidak percaya. Apakah anjing ini hanya berbicara kepada saya?

Ini rekaman audio dari suara manusia yang benar-benar mengatakan kalimat itu?

Iya. Kita harus melatih anjing untuk melakukannya dua kali karena pertama kali manusia tidak percaya.

Apakah yang kedua kalinya, apakah anjing itu berkata, "Tidak, sungguh! Maksudku kali ini?"

Tidak, kami hanya mengulangi hal yang sama dan sepertinya berhasil. Kami masih mengujinya. Kita perlu mengujinya pada beberapa orang yang tidak menaruh curiga di Georgia Tech dan melihat apa yang mereka katakan. Jika itu terjadi pada Anda, Anda tahu itu bagian dari pengujian kami. Kami akan memiliki salah satu asisten anjing kami dalam pelatihan datang ke sini untuk melakukan demonstrasi itu.

Anjing itu harus mempelajari trik baru sebelum jam 2 siang sore ini?

Faktanya, kami awalnya berpikir kami akan memiliki masalah dengan membawa anjing ke SXSW dan jadi kami akan melakukan banyak pelatihan hari ini untuk dapat memamerkan apa yang kami inginkan.

Gagasan bahwa anjing-anjing ini memiliki semua persepsi yang dapat diartikulasikan kepada kita adalah hal yang baru. Kami memiliki beberapa pers pada rompi FIDO kami, dan kami mendapat telepon dari polisi Georgia Tech yang menanyakan apakah rompi itu dapat digunakan untuk anjing yang mengendus bom. Kami terkejut mengetahui bahwa mereka memiliki anjing pelacak bom, menjelaskan bahwa anjing-anjing itu digunakan untuk memindai tempat-tempat olahraga sebelum orang-orang masuk. "Kami seperti, " Oh. Ceritakan tentang sniffing bom. "Kami tertarik untuk belajar lebih banyak .

Ternyata anjing dilatih untuk hal-hal seperti bubuk senjata dan C4 tetapi juga hal-hal seperti bom peroksida, yang… baunya sangat berbeda. Bom peroksida juga sangat tidak stabil. Jika Anda mendapatkannya, Anda tidak ingin anjing atau pawang mendekatinya. Bubuk mesiu atau C4 sangat stabil dan itu tidak masalah. Apa yang ingin dilakukan oleh polisi Tech Georgia adalah memiliki anjing-anjing memiliki rompi mereka dengan dua mainan tarik kecil. Jika anjing bau bubuk pistol , mereka menarik bubuk senjata satu dan itu lokasi geografis mereka dan itu menunjukkan lokasi anjing di layar petugas di mana anjing itu berada. Kemudian mereka tahu ada bom di sini tapi itu bom stabil dan mereka bisa memerintahkan anjingnya untuk tetap di sana dan menggonggong bom itu sampai mereka dapat menemukannya dengan cepat.

Jika anjing menarik sisi lain rompi, itu adalah bom peroksida. Kami tahu itu tidak stabil dan kemudian Anda benar-benar memanggil anjing untuk menghindarinya dan kemudian Anda mengirim jenis unit pembuangan bom yang berbeda.

Hal yang sama dengan pencarian dan penyelamatan… dan anjing-anjing pertanian TSA ini untuk apa yang mereka cium di koper orang. Anda dapat dan bahkan melakukan ini untuk inspeksi ladang petani. Ada beberapa hal seperti ubi jalar di mana Anda tidak bisa mengatakan dari luar bahwa ada masalah. Ini adalah hal baru di North Carolina yang hanya merusak tanaman mereka. Anjing-anjing bisa menciumnya. Anda dapat mengirim anjing-anjing dan memilikinya sehingga mereka dapat mencari ladang sampai mereka menemukannya. Jika mereka menemukannya, mereka waspada. Anda lihat di mana mereka berada. Kamu pergi kesana. Anda dapat melihat di mana mereka berada, menggali akarnya, mengkonfirmasi bahwa itu benar-benar membusuk dan kemudian Anda menyingkirkan bagian lapangan itu dan mulai lagi.

Ternyata begitu kita mulai memanfaatkan anjing-anjing ini untuk melakukan hal-hal ini, lebih banyak orang keluar dari kayu, aplikasi baru ditemukan. Anjing-anjing yang mengendus truffle, misalnya.

Itulah yang saya pikirkan.

Itu salah satu favorit saya. Kami memiliki penggemar yang ingin bermain bersama kami sekarang untuk yang itu.

Bisakah saya meminjam anjing untuk akhir pekan?

Persis.

Hal yang saya sukai dari hal ini adalah Anda memberi manusia akses ke persepsi anjing, yang dalam banyak hal lebih unggul daripada manusia, dan hanya menggunakan teknologi untuk memungkinkan mereka mengomunikasikan persepsi itu.

Indera penciuman mereka 100 kali lebih baik dari apa pun yang kami lakukan secara elektronik. Mereka memiliki indera pendengaran yang sangat baik. Penglihatan mereka tidak sebaik kita, tetapi mereka memandang berbeda. Jika kita membiarkan mereka benar-benar berkomunikasi dengan lebih baik, kita mungkin dapat belajar lebih banyak tentang apa yang mampu mereka lakukan dan bagaimana mereka melakukan pekerjaan mereka dengan lebih baik. Tentu saja, anjing-anjing berpikir ini sangat menyenangkan. Ini semua permainan untuk mereka.

Mari kita beralih ke umpan balik haptic dan pembelajaran haptic dan beberapa sistem yang telah Anda lakukan di sana. Benarkah Anda bisa mengajari seseorang cara bermain piano tanpa benar-benar bermain piano ?

Ini sangat gila. Kami menyebutnya pembelajaran umpan balik pasif haptic pasif. Ini adalah salah satu kekuatan super yang dapat diberikan oleh komputer yang dapat dikenakan kepada Anda. Gagasan bahwa itu dapat mengajarkan Anda tugas mekanik yang kompleks atau tugas manual yang rumit tanpa perhatian Anda. Agak mengejutkan. Kami telah melakukan ini dengan piano beberapa kali.

Misalkan Anda ingin mempelajari Beethoven "Ode to Joy." Itu salah satu yang lebih sederhana yang kami gunakan untuk demonstrasi kami. Kami meminta Anda mengenakan sarung tangan, dan sarung tangan itu hanya memiliki sedikit motor getaran di setiap jari. Anda memakai headset Bluetooth Anda, dan itu hanya memutar lagu berulang-ulang ketika Anda dan saya berbicara atau Anda sedang membaca email, atau Anda sedang mengemudi, apa pun. Anda mengabaikannya dan itu hanya memutar lagu berulang-ulang. Saat setiap not dimainkan, ketukan jari yang menjadi milik not itu. Setelah 20 menit, Anda memiliki bait pertama "Ode to Joy."

20 menit berikutnya, Anda memiliki yang kedua. Dalam sekitar satu jam dan 30 menit hanya dengan ketukan ini, kita harus memecahnya dalam potongan yang tepat, tetapi setelah sekitar satu jam dan tiga puluh menit, Anda memiliki seluruh lagu. Jika Anda meletakkan jari-jari Anda ke bawah, maka Anda meletakkan tangan Anda di atas piano, kami menandai di mana not pertama adalah karena jika tidak Anda tidak akan tahu, dan tangan Anda menjadi kerasukan dan itu hanya memainkan lagu itu. Salah satu dari hal-hal ini adalah bahwa jika Anda terlalu fokus pada hal itu, Anda tidak dapat melakukannya tetapi jika saya mengalihkan perhatian Anda, Anda dapat melakukannya.

Anda memainkan lagu itu dan, saya bayangkan, Anda memutar suara itu kembali ke kepala Anda untuk mencoba dan menekan nada yang sama.

Kami pernah melakukan ini dengan Chad Myers di CNN. Dia tidak memiliki bakat musik. Kami meletakkannya di tangannya saat dia melacak badai di Teluk, kemudian membawanya keluar langsung di CNN. Anda bisa melihatnya menderita demam panggung ini. Orang ini di depan 20 juta orang setiap hari, namun mengalami demam panggung ketika dia meletakkan tangannya di atas piano. Anda bisa melihat dia bahkan tidak tahu lagu apa itu. Dia mulai mengetuknya. Dia tidak tahu apa yang akan terjadi tetapi ketika dia melanjutkan dia mengenali nada. Tiba-tiba iramanya menjadi lebih baik dan dia kemudian mengulanginya. Dia menjadi lebih baik dan lebih baik dalam hal itu saat dia pergi. Anda bisa melihat wahyu "oh my word" di wajahnya. Setelah melakukannya sendiri beberapa kali, saya akan mengatakan itu adalah hal yang sangat aneh.

Hal yang kami coba lakukan sekarang adalah angka seberapa jauh kita bisa melakukannya. Kami mulai dengan hanya satu nada, melodi satu tangan. Kemudian, murid saya, Caitlyn, telah menemukan cara melakukan akord. Sekarang bagian standar kami adalah Mozart's Turkish March. Bagi orang-orang yang adalah musisi, Anda tahu bahwa dua tangan sangat berbeda, ritme yang sangat berbeda pada mereka. Ini adalah bagian yang cukup rumit sehingga mempelajarinya adalah non-sepele. Kami mengambil pemula lengkap, melemparkan sarung tangan di tangan mereka dan setelah beberapa sesi, mereka memainkan bagian yang kompleks ini. Saya tidak mengatakan mereka adalah musisi yang hebat, tetapi saya mengatakan mereka tahu urutan not. Kami tertarik kemudian dalam hal apa lagi kita bisa mengajar.

Salah satu hal yang mulai kami perhatikan adalah mengetik. Karena kami menemukan cara membuat akor, kami mencoba melakukan braille. Braille melibatkan enam jari ini, jadi ini titik-titiknya, atau delapan jari ini jika Anda melakukan bentuknya yang panjang. Kebanyakan orang tidak repot-repot mempelajari braille saat mereka semakin tua karena mereka kehilangan visi. Ini juga krisis nyata dengan siswa. Sekitar 40 persen dari mereka tidak pernah belajar braille setidaknya tidak cukup memadai untuk berkomunikasi dengan menggunakannya. Mempelajari huruf braille untuk siswa yang tunanetra adalah salah satu indikator besar kemajuan pendidikan di masa depan serta keberhasilan ekonomi. Guru-guru braille yang mengajar braille ini keliling, bergerak. Mereka hanya pergi dari sekolah ke sekolah karena tidak ada cukup permintaan untuk memiliki guru tetap di sekolah tertentu.

Kami mulai mencari cara membuat sarung tangan yang bisa mengajari orang-orang braille secara pasif. Jawabannya adalah ya. Dalam empat jam, saya bisa memberi Anda earbud dan sarung tangan ini. Sementara Anda melakukan dan Anda dapat melakukan apa pun yang Anda inginkan, dan itu hanya akan berulang kembali kepada Anda, "Rubah cokelat cepat melompati anjing malas." Itu setiap huruf pada satu waktu dan Anda merasakan huruf di jari-jari Anda. Setelah sekitar empat jam dari ini, saya katakan, "Apa huruf G, " dan Anda tahu itu. Apa huruf A, "kamu tahu itu bahwa. Anda tidak hanya bisa mengetiknya tetapi Anda bisa merasakannya. Anda menjalankan jari Anda di atas pips dan tahu cara mengetik surat itu. Anda pergi, "Oke, sekarang bagaimana saya mengetik itu? Oke, jadi itu G." Yang mengejutkan kami, ini hanya bekerja.

Menurut Anda apa yang terjadi di otak untuk memungkinkan koneksi semacam itu? Karena itu tidak disadari dan bukan hanya intelektual juga? Itu adalah sesuatu yang lain antara pikiran dan tubuh.

Ada banyak hal yang saya tidak tahu. Tetapi ada beberapa spekulasi oleh kolega saya yang percaya bahwa yang terjadi adalah indera perasa adalah perasaan manusia yang jauh lebih awal dari evolusi yang dimiliki manusia secara evolusioner. Hampir semua hewan memiliki indera peraba. Itu tampaknya sesuai dengan gagasan bahwa sentuhan adalah bagian dari bagian otak kita yang sangat rendah fungsinya, jenis otak yang sangat rendah kadal. Mungkin paparan itulah yang membuat kita mengenali pola-pola ini. Sedangkan Anda mencoba mempelajari sesuatu seperti bahasa ketika Anda tidur, itu tidak berfungsi dengan baik karena audio adalah hal otak yang jauh lebih tinggi. Itu sebabnya kami tidak berharap percobaan barang entri teks berfungsi. Musik adalah hal-hal otak yang sangat rendah, sedangkan sistem bahasa dianggap sebagai fungsi otak yang lebih tinggi.

Ini tidak terkait bahasa.

Baik. Fakta bahwa entri teks pembelajaran berhasil adalah kejutan bagi kami. Kami tidak yakin seberapa jauh kami bisa melangkah. Bisakah kita mengajarkan bahasa isyarat? Bisakah kita mengajar menari? Bisakah kita membantu para ahli menjadi lebih efisien? Salah satu hal yang ingin kami lakukan adalah mendapatkan beberapa pelempar bola baseball dan merekam gerakan lengan mereka dan melihat apakah kami dapat memainkannya kembali pada mereka di waktu henti dan meningkatkan konsistensi mereka.

Saya tidak tahu apakah semua ini akan berhasil. Namun, satu hal yang kami coba adalah Kode Morse. Braille hanyalah urutan utama. Kode Morse adalah ritme.

Kami menemukan bahwa kami dapat menggunakan transduser induksi pada kaca. Untuk mengetuk sisi kepala Anda. Sekarang, ini biasanya bekerja dengan menggetarkan tengkorak Anda dan mengirimkan suara langsung ke koklea Anda, melewati gendang telinga Anda. Inilah sebabnya saya bisa memakai ini dan mendapat sedikit peringatan dan tidak ada yang menghalangi telinga saya, tetapi jika hit Anda dengan 15 hertz rasanya seperti ketukan.

Kami mulai dengan pelatihan gaya "rubah cokelat cepat melompati anjing malas", tetapi sekarang kami hanya mengetuk sisi kepala Anda dalam Kode Morse dan percaya atau tidak dalam 4 jam lagi - sepertinya waktu ajaib untuk alfabet -Kebanyakan peserta kami mengalami kesalahan 0… ketika kami meminta mereka mengetikkan S. Kami dapat menunjukkan tanda hubung dan titik pada kertas dan mereka dapat menuliskan huruf untuk itu. Kita dapat mengetuk sisi kepala mereka lagi dan mereka bisa tahu pesan apa yang kami kirim.

Jadi empat jam dan kami meminta mereka melakukan ini selama permainan video. Jadi kami memastikan kami mengalihkan perhatian mereka dengan video game. Video game berubah menjadi gangguan yang paling efisien.

Kami sudah tahu itu sejak lama.

Itu benar. Kami sedang mencoba ujian masuk lulusan. Beri mereka pemahaman membaca, atau masalah matematika. Ternyata satu-satunya yang mengganggu adalah video game.

Itu hal yang menarik. Kami hanya berbicara dengan Poppy Crum sebelumnya hari ini tentang audio dan pencampuran indra. Ada banyak AR di acara ini; ada banyak realitas virtual. Beberapa hal yang paling menarik sedang terjadi tidak hanya dalam satu pengertian, tetapi dalam kumpulan indera. Jadi, dalam percakapan ini kita sudah bicara tentang ruang visual, kita sudah bicara tentang ruang audio dan juga fisik. Sensasi sentuhan. Ketika Anda menyatukan semua itu, sepertinya hal-hal yang sangat menarik mulai terjadi.

Itu semuanya. Bukan hanya sintesis atau indera. Itu juga fakta bahwa itu adalah sesuatu yang bisa kamu kenakan bersamamu sepanjang hari. Setelah Anda memiliki kedekatan dengan tubuh seperti itu, Anda dapat melakukan segala hal dengan tubuh yang tidak pernah kita pikirkan sebelumnya.

Pembelajaran sentuhan taktil pasif adalah satu, dan hal lain yang muncul adalah rehabilitasi sentuhan taktil pasif. Ini juga cukup mengejutkan bagi kami. Kami memiliki open house yang mempertunjukkan permainan piano kami dan salah satu kolega kami di Shepherd Center - yang banyak menangani cedera tulang belakang - ia datang dan berkata, "Hei, saya ingin ini untuk pasien saya." Saya tidak mengerti mengapa dia ingin orang dengan tetraplegia berlatih piano. Dia berkata, "Tidak, kamu tidak mengerti, Tetraplegia hanya berarti keempat anggota badan terpengaruh. Pasien saya dengan cedera tulang belakang parsial masih memiliki beberapa sensasi dan ketangkasan. Saya bertaruh jika kita mengenakan sarung tangan dan melatih mereka bermain piano, bahwa mereka benar-benar akan mendapatkan kembali sensasi; meningkatkan sensasi dan ketangkasan mereka."

Dia benar. Kami mengajar sekitar delapan lagu berbeda selama delapan minggu. Peserta akan memiliki sarung tangan dua jam sehari, lima hari seminggu dan kemudian belajar piano tiga kali seminggu. Pada akhir delapan minggu, para peserta yang memiliki sarung tangan melakukan jauh lebih baik. Mereka mengalami peningkatan signifikan dalam sensasi tangan dan ketangkasan mereka dibandingkan dengan orang-orang yang baru saja belajar piano.

Jadi, gagasan bahwa kita dapat melakukan rehabilitasi, bahwa kita dapat menipu otak Anda untuk mencurahkan lebih banyak sumber daya untuk menjelaskan sinyal-sinyal yang keluar dari tangan Anda ini sungguh menakjubkan. Saya tidak tahu apakah Anda pernah mengalami patah kaki atau memiliki orang tua yang menjalani operasi pinggul, tetapi rehabilitasi membutuhkan waktu lama. Sangat membosankan, dan sulit membuatnya menyenangkan. Sulit untuk mendapatkan kepatuhan. Jika saya bisa memakai sarung tangan dan menjalani rehabilitasi, dan omong-omong, kami akan memberi Anda kekuatan super ini yang akan Anda pelajari untuk bermain piano pada akhirnya, itu semacam motivasi untuk banyak orang.

Itulah yang sedang kami lakukan. Kami sedang melakukannya sekarang. Kami mencoba melihat apakah ini dapat membantu pemulihan sensasi tangan setelah stroke. Jika ternyata berhasil, maka ada satu juta orang setahun yang mungkin kami bantu. Itu sangat spekulatif. Kami tidak tahu apakah itu akan berhasil atau tidak, tapi kita akan lihat.

Baiklah. Mari kita tanyakan beberapa pertanyaan yang saya ajukan kepada semua tamu saya. Tren teknologi apa yang Anda lihat saat ini yang paling mengkhawatirkan Anda? Apa yang membuat Anda terjaga di malam hari?

Sangat sedikit membuatku terjaga di malam hari. Saya tidur cukup nyenyak.

Anda memiliki tiga pekerjaan.

Saya punya tiga pekerjaan. Saya tidak punya waktu untuk tidur. Banyak kekhawatiran orang tentang teknologi adalah apa yang Anda lihat di media. Realitas jauh lebih membosankan daripada apa yang akan dituntun banyak komentator kepada Anda atau film. Saya kira hal yang paling saya khawatirkan adalah ruang gema yang dapat disebabkan oleh media sosial. Orang bisa mempercayai pseudo-sains. Orang dapat dituntun untuk mempercayai hal-hal yang tidak benar. Orang-orang membuat komentar tentang pekerjaan saya, dan saya kira, itu salah.

Saya melakukan banyak pekerjaan dengan komunitas tuli. Ternyata mengajarkan bahasa isyarat anak Anda akan membantu mereka memperoleh keterampilan bahasa lebih cepat. Untuk waktu yang lama orang percaya bahwa jika Anda mengajar anak-anak Anda bahasa isyarat, itu akan menunda timbulnya ucapan normal. Itu salah. Mengajarkan bahasa isyarat sejak lahir tampaknya membantu meningkatkan keterampilan bahasa setiap orang.

Sebagian besar anak-anak tidak dapat benar-benar membentuk kata-kata dengan jelas sampai mereka berusia 12 bulan. Mereka dapat mulai membentuk tanda, Anda tahu hal-hal seperti susu atau makanan. Mereka bisa melakukannya dalam enam bulan. Memiliki anak dapat mengekspresikan diri adalah apa yang memberi mereka jangka pendek ingatan. Anda belajar memori jangka pendek dari mempelajari cara berkomunikasi. Jadi, memiliki anak-anak yang dapat menandatangani enam bulan lebih awal dari yang mereka dapat berbicara mungkin memberi mereka keuntungan pada memori dan bahasa pada umumnya. Penelitian asli berusia 20 tahun tetapi mereka cukup yakin tentang hal itu sekarang. Jadi baru-baru ini bahkan komunitas medis mengatakan, "Oh, Anda harus mengajar tidak hanya anak-anak tuli tetapi juga anak-anak dalam bahasa isyarat." Itu hal yang sangat kuat.

Kami memiliki permainan yang disebut Pop Sign yang memungkinkan orang tua yang mendengar anak-anak tuli untuk belajar bahasa isyarat, atau orang tua mana pun untuk belajar bahasa isyarat, dengan bermain di situs permainan yang adiktif ini atau ponsel mereka.

Jadi, kembali ke pertanyaan awal Anda, saya melihat situasi lain di mana orang-orang yang masuk ke ruang gema terutama dengan pengetahuan langka. Sangat mudah untuk membuat orang salah jalan.

Di sisi optimis, apa yang paling Anda dorong dan harapkan?

Yah, saya suka hal-hal yang Elon Musk lakukan tentang mencoba mengubah kita menjadi tenaga surya. Saya tipe orang yang menunggu ubin atap itu tersedia sehingga saya bisa mengubah rumah saya.

Di ruang saya sendiri, komputasi yang bisa dipakai, asisten yang cerdas itu lepas landas. Melihat kehidupan orang-orang berubah oleh ketersediaan perangkat ini bukan hanya karena itu meningkatkan kehidupan pribadi mereka atau kehidupan profesional mereka, tetapi benar-benar menyelamatkan nyawa di atas meja ruang operasi, hanya karena informasi yang dapat kami sampaikan tepat pada waktunya kepada dokter bedah.

Jadi ide bahwa kita akan memiliki asisten cerdas yang dapat membantu kita setiap detik. Akhirnya, kita sampai pada tahap di mana hal-hal ini menjadi berguna.

Gadget apa, layanan atau perangkat yang Anda gunakan setiap hari, mengubah hidup Anda? Apa yang paling Anda sukai? Anda tidak dapat memilih Google Glass.

Bisakah saya memilih prototipe saya sebelumnya sistem foto ?

Saya kira saya akan membiarkan itu.

Sistem yang saya miliki sebelum Glass adalah layar Micro Optical SVB6 dan keyboard Twiddler dan komputer paket bahu. Perangkat keras bukan pengubah permainan, itu adalah kemampuan untuk membuat catatan selama percakapan dan merujuk ke catatan ini telah mengubah hidupku. Jika saya duduk di seberang meja dari seorang pemenang Hadiah Nobel saat makan siang, saya ingin dapat mengingat percakapan itu. Saya ingin tahu hanya lima kata yang akan memacu ingatan alami saya.

Ternyata memiliki keyboard ini sehingga saya dapat mengetik di bawah meja dan mencatat bahwa percakapan telah membuat saya menjadi manusia yang jauh lebih efektif dan lebih anggun secara sosial. Salah satu hal yang membuat murid-murid saya terkejut melihatnya adalah sebelum saya melihat seseorang, saya menarik Rolodex saya pada mereka. Ini adalah terakhir kalinya kami berbicara bersama dan apa yang kami bicarakan. Ini benar-benar membantu saya memuat ulang otak saya tentang percakapan kami.

Misalkan saya mengunjungi seorang teman lama. Saya memiliki catatan seperti, "Hei, anak putrinya akan kuliah. Dia sedang belajar geologi; saya ingin menghubungkannya dengan istri saya. Saya harus bertanya kepadanya apakah itu terjadi." Ini benar-benar memungkinkan Anda, tidak hanya dalam karir profesional Anda, tetapi juga menjadi lebih sosial juga.

Ya, kami banyak berbicara tentang perangkat ini membuat kami lebih pintar dan membuat kami tampak lebih pintar. Perluasan memori tempat Anda tiba-tiba terhubung ke lebih banyak dari hidup Anda karena Anda dapat mengingat lebih banyak dari itu karena Anda dapat mengakses lebih banyak dari itu dan mendapatkan pengingat itu secara real time, itu aplikasi yang menarik.

Pada hari-hari awal komputasi yang dapat dipakai, kami melakukan tiga hal. Kami melakukan augmented / realitas alternatif, kolektif intelektual, dan memori augmented. Kolektif intelektual adalah sejenis media sosial. Augmented reality adalah hal yang paling digemari belakangan ini. Kebanyakan orang tidak menyadari bahwa itu disebut Realitas Buatan sebelum kita menciptakan istilah Alternate Augmented Reality. Sebenarnya, saya bisa memberi tahu Anda mengapa kami mengubah nama.

Kenapa kau melakukan itu?

Pada hari-hari awal saya mempelajari realitas buatan ini, ada seorang pria bernama Myron Krueger, yang menulis sebuah buku yang luar biasa berjudul Artificial Reality 2 . Saya sangat merekomendasikan hal ini kepada siapa pun yang ingin memahami Augmented Reality. Bagaimanapun, saya pikir Timothy Leary yang mulai melakukan wawancara pers di mana dia berbicara tentang Realitas Virtual dan Realitas Buatan seperti perjalanan narkoba LSD. Pada saat itu, saya adalah seorang mahasiswa yang menulis proposal hibah, dan saya tidak ingin mereka mencari istilah Realitas Buatan dan melihatnya berafiliasi dengan LSD.

Jadi saya pikir saya perlu menemukan istilah lain untuk digunakan yang tidak akan menarik sesuatu di web yang mungkin membuat saya dalam masalah, jadi kami membuat keputusan sadar untuk menyebutnya Augmented Reality. Untungnya untuk saya orang-orang lain di Boeing ini juga sedang melihat menggunakan augmented reality untuk mengumpulkan barang-barang ini untuk melakukan memanfaatkan jalur listrik dan membuat pesawat terbang, dan mereka datang dengan istilah yang sama. Jadi saya pikir saya memiliki versi tertulis pertama, dan mereka memiliki publikasi pertama. Nama Augmented Reality macet.

Apakah Anda mendapat hibah?

Aku melakukannya. Itu sebabnya saya di sini hari ini. Terima kasih kepada NDSEG, Persekutuan Sarjana Sains dan Teknik Pertahanan Nasional, saya percaya. Jika bukan karena kalian, aku tidak akan berada di sini. Saya tidak akan menjadi profesor. Hibah itu memungkinkan profesor saya untuk mengambil mahasiswa pascasarjana tambahan dan memungkinkan saya untuk membuat komputer yang dapat dikenakan terjadi. Jadi, terima kasih banyak.

• Maju Cepat: 'Note to Self' Host Manoush Zomorodi Maju Cepat: 'Note to Self' Host Manoush Zomorodi
• Maju Cepat: Steve Singh SAP tentang Otomasi, Bisnis Tanpa Batas Maju Cepat: Steve Singh SAP tentang Otomasi, Bisnis Tanpa Batas
• T&J Maju Cepat: Cara Membangun Mesin Emosional T&J Maju Cepat: Cara Membangun Mesin Emosional

Jika orang ingin mengikuti Anda dan mencari tahu apa yang sedang Anda kerjakan, bagaimana mereka bisa melakukannya secara online?

Cara termudah adalah pergi ke Google Cendekia dan ketik nama saya dan Anda akan mendapatkan akses semua makalah saya dan klik saja yang terbaru. Jika Anda ingin melihat sesuatu yang lebih dari hari ke hari jika Anda pergi ke komunitas Google+ pada komputasi Wearable, itu yang saya jalankan, saya mencoba untuk meletakkan hal-hal paling keren yang terjadi di sana. Setidaknya dari penelitian saya dan kami akan mulai meninjau beberapa hal yang terjadi secara umum.