Rumah fitur Di dalam Sumeria, taruhan besar amazon pada augmented reality dan virtual

Di dalam Sumeria, taruhan besar amazon pada augmented reality dan virtual

Daftar Isi:

Video: Inside Sumerian, Amazon's Big Bet On Augmented and Virtual Reality (Oktober 2024)

Video: Inside Sumerian, Amazon's Big Bet On Augmented and Virtual Reality (Oktober 2024)
Anonim

Amazon sedang membuat pintu masuk besar ke ruang augmented reality dan virtual dengan Sumerian, platform pengembangan lengkap yang dapat membangun aplikasi AR dan VR untuk smartphone dan headset, dan - segera - aplikasi AR / VR yang akan berjalan dengan benar di browser Anda.

Dalam pengalaman-pengalaman ini, Sumerian dapat menciptakan dunia virtual imersif yang dihuni oleh "host" - karakter 3D dihidupkan oleh teknologi kecerdasan buatan yang sama yang memperkuat Alexa.

Sumeria adalah platform-agnostik. Daripada mengembangkan perangkat atau headset bermereknya sendiri, Amazon memilih untuk berintegrasi dengan penawaran yang ada. Sumerian dibangun di atas standar web terbuka dan mendukung ARKit Apple dan Google ARCore, yang berarti pencipta aplikasi dapat membangun satu aplikasi Sumeria yang berjalan pada Android, iOS, Oculus Rift, HTC Vive, dan lainnya.

Sebagai tambahan baru ke Amazon Web Services, Sumerian diberi harga menggunakan model berbasis penggunaan layanan itu daripada berlangganan dan terhubung ke layanan AWS lainnya.

Amazon merilis pratinjau Sumeria pada bulan November ketika diumumkan pertama kali, tetapi menjelang peluncurannya pada Mei, PCMag mendapatkan tampilan eksklusif di dalam Sumerian dan beberapa aplikasi pelanggan awal.

Kyle Roche, General Manager Amazon Sumerian, membawa saya melalui demo platform pembuatan aplikasi 3D. Saya mendapat tur editor aplikasi seret-dan-jatuhkan Sumeria dan perpustakaan objek 3D, Mesin Visual State untuk skrip adegan otomatis yang rumit, dan masuk ke dalam proses menciptakan host yang secara artifisial cerdas, yang dapat Anda gunakan untuk melakukan percakapan penuh dengan pengalaman virtual ini..

Saya juga berbicara dengan Marco Argenti, seorang VP yang mengawasi tidak hanya AR / VR, tetapi juga divisi AWS Mobile, Serverless Computing, dan IoT. Amazon memiliki rencana ambisius untuk Sumeria, dan visi yang lebih megah untuk peran yang diperbesar dan realitas virtual yang dikombinasikan dengan AI akan bermain di masa depan kita yang terhubung.

  • Mengapa Amazon Bertaruh pada AR / VR

    Mengarungi industri atau bidang yang sama sekali baru tidak pernah menghentikan Amazon sebelumnya. Lihat saja Whole Foods, Amazon Video, atau upayanya dalam industri kesehatan dan farmasi.

    Roche bercanda bahwa nama Sumerian berasal dari buku sci-fi Snow Crash (yang sebenarnya diadaptasi oleh Amazon sebagai seri) dan ide untuk "tuan rumah" datang dari HBO's Westworld. Tetapi menurut Argenti, keputusan Amazon untuk memasuki ruang AR / VR sebenarnya datang ke tiga faktor utama: munculnya augmented reality berbasis smartphone; peluang VR yang belum dimanfaatkan di pasar business-to-business (B2B); dan membantu pelanggan AWS memecahkan masalah dengan hal-hal yang sudah mereka coba lakukan.

    "Sinyal-sinyal ini cukup kuat bagi kita untuk benar-benar mulai masuk ke dalam proses mendesain Sumerian. Dengan cara klasik Amazon, kami mulai bekerja mundur dari kasing pelanggan dan kemudian pada akhirnya mendanai tim pengembangan untuk membangun produk, " jelas Argenti.

    Aplikasi B2B mencakup skenario seperti signage digital interaktif (bayangkan iklan hologram berbicara raksasa dari Blade Runner: 2049 ), pelatihan virtual, dan sejumlah kasus penggunaan Internet of Things industri, seperti menggunakan sensor untuk membuat kembar digital dan simulasi kompleks. Argenti juga menggarisbawahi pentingnya AR berbasis smartphone untuk mencapai titik belok melalui ARKit dan ARCore.

    "Kamera menjadi alat yang sangat kuat untuk berinteraksi dengan kenyataan dan menjelajahi dunia di sekitar Anda, " katanya. "Prosesor grafik cepat dapat melapisi informasi secara real time, dan sensor dapat membantu membangun realitas 3D. Idenya adalah Anda memiliki sensor berkualitas tinggi, definisi tinggi, dan sadar konteks di tangan jutaan orang."

  • Bagaimana Amazon Membangun Sumeria

    Amazon mulai berpikir tentang bagaimana rupa AR dan VR bagi pelanggan AWS pada akhir 2016, dan sebuah preview memulai debutnya di AWS re: Invent sekitar setahun kemudian. Di antaranya, beberapa hal terjadi.

    Pertama, Amazon membeli startup Swedia yang bangkrut bernama Goo Technologies; lingkungan penciptaan 3D-nya, Goo Create, menjadi dasar lingkungan pengembangan terintegrasi (IDE) Sumeria.

    Pemodelan 3D visual Goo Create juga merupakan layanan cloud berbasis web, tetapi Amazon mengambil langkah lebih jauh dengan memindahkan back-end ke AWS. Ada banyak manfaat untuk membangun di atas infrastruktur cloud scalable yang sudah Anda miliki, tetapi yang besar secara dramatis mengurangi latensi. Roche mengatakan salah satu nilai jual terbesar Sumeria adalah bahwa terlepas dari seberapa kuat editornya, tidak ada yang dapat diunduh atau diinstal. Selama demo, Sumeria dimuat dari URL browser dalam hitungan detik. Bahkan melakukan pemrosesan bahasa alami real-time (NLP) dan membuat animasi yang rumit tidak memperlambatnya.

    Seperti halnya platform pengembangan kode-rendah, Sumerian dapat digunakan pada level dasar tanpa pengalaman pengembang. Namun, para pembuat kode dan ilmuwan data dapat melangkah lebih jauh dengan API yang dapat diprogram dan antarmuka baris perintah Sumeria untuk menyesuaikan adegan dan menulis logika aplikasi yang kompleks.

    "Kami ingin pengalaman di mana Anda mengklik dan Anda segera berada di tempat kejadian, " kata Argenti. "Lalu kamu memiliki alat grafik 3D di mana kamu dapat menarik dan melepaskan objek. Sumerian adalah alat visual yang dapat mengaitkan apa yang terjadi ketika tindakan atau peristiwa terjadi, berpotensi tanpa menulis garis kode."

    Membuat Aplikasi Sumeria 3D

    Filosofi desain Amazon yang lebih luas diikuti dengan Sumerian adalah untuk mengkonsolidasikan pengalaman penciptaan sebanyak mungkin. Roche mengatakan idenya adalah untuk menutupi banyak tugas pengembangan berulang, sehingga proses dasar untuk membangun aplikasi Sumeria adalah sama terlepas dari platform AR dan VR di mana Anda akhirnya menerbitkannya.

    Dimulai dengan memilih templat atau melompat langsung ke membuat adegan baru. Beberapa templat default Sumeria termasuk adegan seperti ruang kantor, ruang pelatihan dan gudang, kapal kargo, dan api unggun outdoor. Editor utama mendukung WebGL dan WebVR, dan ditata dengan cara yang sama seperti banyak alat kode rendah yang telah kami uji.

    Di sebelah kiri adalah panel entitas. Entitas pada dasarnya adalah tabel dalam basis data yang membantu Anda mengelola data yang ditarik ke dalam aplikasi Anda. Di bawahnya adalah jendela aset, di mana Anda dapat mencari objek yang ingin Anda tarik ke dalam adegan atau membuka perpustakaan aset lengkap semua model 3D Sumeria. Roche mengatakan Sumeria menarik sejumlah perpustakaan objek open-source dan berintegrasi dengan Sketchfab API. Amazon juga tertarik untuk berintegrasi dengan platform seperti TurboSquid dan perpustakaan objek Poly AR / VR Google, katanya. Anda dapat mengimpor aset Anda sendiri ke Sumeria juga dan memasukkannya ke dalam heboh.

    "Panel aset dapat berfungsi sebagai zona penurunan untuk pipa penyesuai, " jelas Roche. "Anda dapat menyeret sebagian besar format file 3D; kami akan mengonversinya, mengoptimalkannya, dan menyimpannya untuk Anda. Salah satu hal yang kami lakukan di back-end adalah jika Anda menggunakan aset yang sama di banyak adegan, kami Sebenarnya akan membuat tautan referensi untuk Anda."

    Di tengah layar adalah kanvas utama, di mana Anda dapat menarik dan melepas aset dan model 3D ke dalam sebuah adegan. Di sudut kanvas adalah tombol untuk meluncurkan pratinjau WebVR adegan Anda.

    Di bawahnya adalah editor timeline, yang berfungsi mirip dengan alat pengeditan video. Saat Anda menarik animasi dan suara ke dalam bingkai dan menggunakan Mesin Visual State untuk membuat tindakan, perilaku tuan rumah, dan perkembangan acara, semuanya akan muncul di timeline, di mana Anda dapat menyesuaikan bagaimana satu negara transisi ke yang lain.

    Kolom kanan adalah panel inspektur, yang menunjukkan detail pada setiap komponen yang Anda lihat dan bagaimana Anda dapat menyesuaikannya. Untuk model yang mungkin memiliki seratus variasi berbeda, Anda dapat menyesuaikan hal-hal seperti atribut dan tekstur tanpa benar-benar menyentuh pemandangan.

    Strategi Amazon: Integrasikan Dengan Semua Orang

    Sumeria tidak hanya bermain di ruang pengembangan 3D dengan platform seperti Unity, Unreal Engine, dan Vuforia, tetapi juga di ekosistem AR / VR yang lebih luas bersama dengan ARKit, ARCore, dan Windows Mixed Reality. Roche mengatakan Sumeria menerapkan filosofi "membangun sekali, jalankan di mana saja" untuk aplikasi AR / VR dan terutama untuk pengembang perusahaan.

    "Pengembang 3D pro atau animator pro memiliki studio yang bekerja dengan mereka. Tetapi sebagian besar pengembang web atau seluler mempelajari sesuatu seperti Unity di tempat kerja, " kata Roche. "Persatuan itu hebat, tetapi untuk benar-benar pandai itu jauh lebih sulit daripada mengambil keterampilan yang mereka miliki - seperti jika mereka pandai JavaScript - dan memudahkan mereka menjadi 3D seperti itu. Jadi kami memutuskan untuk fokus pada hal itu bagian dari pasar."

    Sumerian mendukung beberapa standar inti terbuka: WebGL, WebAR, WebVR, dan kerangka kerja WebXR yang akan membawa aplikasi AR / VR ke semua perangkat dan browser di seluruh platform. World Wide Web Consortium (W3C) akan memilih untuk meratifikasi WebXR dalam beberapa bulan mendatang. Pada saat itu, aplikasi Sumeria akan dapat berjalan langsung di browser.

    Antara WebGL, WebVR, dan WebXR, Sumerian sepenuhnya platform-agnostik, dan Sumeria menerbitkan pembungkus asli untuk berintegrasi langsung dengan ARKit dan ARCore untuk aplikasi AR berbasis smartphone. Roche mengatakan Sumerian dapat membangun aplikasi untuk platform apa pun yang mendukung WebVR, yang berarti tidak hanya Oculus Rift dan HTC Vive tetapi juga Samsung Gear VR, Google Daydream View, dan lainnya. Sumerian juga bekerja erat dengan tim Google Chrome di WebXR untuk aplikasi berbasis browser.

    Pemain utama lain di ruangan itu adalah Microsoft. Sementara Amazon tidak mengatakan bahwa Sumeria akan berintegrasi dengan ekosistem Windows Mixed Reality, Roche mengatakan bahwa rilis RS4 terbaru dari Microsoft HoloLens termasuk dukungan WebAR, yang berarti Sumeria dapat menjalankan adegan HoloLens. Amazon juga menonton headset lain dari perusahaan seperti Magic Leap dan Meta, tetapi pendekatannya memberi Sumerian manfaat fleksibilitas.

    "Kami membuat pilihan. Kami bisa menempuh jalan membuat barang milik kami sendiri dan mendorong pengembang ke arah itu, " kata Argenti. "Yang kami putuskan adalah seluas mungkin dalam mendukung apa yang kami pikir akan menjadi pasar besar. Begitu semuanya pindah ke WebXR, seluruh ekosistem perangkat menyertainya. Kami akan mengejar fondasi yang mendasarinya."

  • Host AI Sumeria adalah Pengubah Game

    Tuan rumah adalah salah satu nilai jual paling unik di Sumeria. Host adalah karakter animasi 3D yang dapat Anda tempatkan dalam adegan AR atau VR. Pengguna dapat mengajukan pertanyaan kepada tuan rumah, dan pengembang dapat membuat skrip serangkaian tindakan, perilaku, gerakan, dan gerakan yang rumit yang dapat dilakukan oleh tuan rumah saat mereka melakukan percakapan dan berjalan di sekitar adegan. Amazon menarik inspirasi bagi tuan rumah dari segala tempat, termasuk game online seperti Second Life dan The Sims, kata Roche.

    Sumeria saat ini memiliki dua host default - Cristine dan Preston - tetapi akan meluncurkan serangkaian host selama tahun ini. Amazon membangun banyak nuansa ke dalam karakter AI ini. Roche menunjukkan kepada saya demo Cristine di mana ia menyeret pembawa acara ke dalam adegan, dan membuka panel inspektur untuk menyesuaikan emosinya, ekspresi wajah, dan gerak tubuhnya. Amazon akan membuat gerakan secara otomatis saat tuan rumah berbicara berdasarkan pemrosesan bahasa alami dari percakapan. Jadi jika Cristine mengatakan "Hai, " itu mungkin memicu gerakan melambai.

    Dengan sesuatu yang disebut sistem point of interest, Anda dapat mencentang kotak di editor sehingga mata pembawa acara selalu memperhatikan kamera. Jadi, jika Anda mengenakan HTC Vive Pro berjalan di ruang 360 derajat, tuan rumah dapat mengikuti Anda. Jika itu adalah aplikasi AR yang terhubung ke kamera ponsel cerdas Anda, Roche menjelaskan bahwa sistem pembelajaran mendalam Rekognition Amazon dapat menjalankan analisis wajah di mana Anda berada dan di mana wajah Anda berada dalam bingkai untuk membuatnya tampak seperti tuan rumah melihat kembali ke layar Anda. langsung pada Anda. Ini memberi Anda ilusi kontak mata.

    Pelanggan juga dapat membuat host kustom sendiri dari awal menggunakan Maya SDK Amazon, tetapi Amazon menyediakan kerangka dasar dari mana Anda dapat menyesuaikan tampilan, dialek dan infleksi host, bahasa, dan banyak lagi. Dalam jangka panjang, Amazon sedang memikirkan cara untuk membuatnya lebih mudah untuk membuat host. Argenti berbicara tentang ide penghasil host untuk avatar orang pertama, atau menggunakan pengenalan wajah untuk mencocokkan karakter yang diberikan kepada orang sungguhan.

    "Sehubungan dengan Rekognition, jika kami secara prosedural menghasilkan sebanyak mungkin karakter ini, kami dapat mencoba mencocokkan Anda dengan avatar terdekat. Kami akan mengambil foto Anda dan menjalankan pengenalan wajah terbalik dan mencocokkannya dengan karakter acak untuk memberikan Anda sebuah host yang terlihat seperti versi Anda."

    Argenti menjelaskan bagaimana mengintegrasikan layanan AWS lainnya seperti layanan pemrosesan bahasa alami Amazon Comprehend dapat membuat host lebih hidup. Pahami analisis teks untuk mengekstrak metadata pada hal-hal seperti analisis suasana hati dan sentimen. Jadi tuan rumah dapat memiliki ekspresi wajah atau cara yang berbeda atau berbicara berdasarkan suasana hati orang yang berinteraksi dengannya.

    "Jika mereka marah, mungkin tuan rumah menenangkan mereka, " kata Argenti. "Ada evolusi tidak hanya dalam cara kami menyampaikan informasi, tetapi bagaimana kami menyajikannya melalui analisis sentimen yang mendalam."

  • Menarik dalam Layanan Suara Di Belakang Alexa

    Tuan rumah tidak terlalu baik jika mereka tidak dapat berbicara. Anda tidak bisa mengatakan "Hei Alexa" di aplikasi Sumeria dengan cara yang sama seperti Anda dapat mengaktifkan Cortana dalam Windows Mixed Reality. Alih-alih, Amazon menggunakan pengenalan suara otomatis dan API pemahaman bahasa alami di belakang Alexa untuk memungkinkan host melakukan percakapan.

    Sumerian terintegrasi dengan Amazon Lex dan Amazon Polly. Polly adalah layanan text-to-speech yang mengubah teks menjadi skrip yang dapat diucapkan oleh tuan rumah. Lex adalah mesin NLP untuk membangun antarmuka percakapan, yang mana host dapat memahami dan menanggapi apa yang dikatakan pengguna dalam aplikasi AR atau VR. Sumeria saat ini mendukung lebih dari dua lusin bahasa melalui Polly, dan ada fitur sinkronisasi bibir yang akan mencocokkan gerakan mulut tuan rumah dengan irama bahasa atau ucapan.

    "Suara adalah media yang benar-benar masuk akal saat Anda tenggelam dalam AR atau VR, " kata Argenti. "Saya ingin berbicara dengan karakter jika saya dapat melihatnya berdiri di sana. Jadi kami mengambil dua alat ini dari kelompok AI dan mencoba untuk benar-benar mempersonifikasikan mereka. Kami ingin tempat kejadian dapat mendengarkan dan menanggapi kami. Jadi Anda dapat mengambil seluruh aliran Lex seperti yang Anda lakukan untuk chatbot dan hanya menyeretnya ke karakter. Dalam banyak hal itu sebenarnya lebih mudah daripada membangun keterampilan Alexa."

    Logika Skrip di Dunia Immersive

    Mesin Visual Negara Sumeria adalah tempat Anda dapat mengatur urutan kompleks dan simulasi virtual. Dengan menggunakan editor garis waktu visual atau antarmuka JavaScript lengkap, pembuat aplikasi dan pengembang dapat membuat skrip logika yang mengontrol bagaimana host atau objek lain dalam adegan Anda merespons tindakan yang berbeda. Misalnya, Sumerian menyertakan objek drone terbang yang dapat Anda skrip untuk terbang.

    Ini semua menjadi lebih rumit ketika Anda memasukkan objek dunia nyata ke dalam persamaan. Karena Argenti juga mengawasi komputasi tanpa server dan divisi IoT di AWS, ia berbicara tentang bagaimana menghubungkan Sumeria ke layanan AWS seperti Lambda dan Greengrass dapat membuka lebih banyak kemungkinan untuk simulasi yang kompleks. Greengrass adalah cara bagi model pembelajaran mesin untuk berjalan secara lokal di perangkat IoT sendiri. Pikirkan tentang pelatihan model ML pada data yang didapatnya dari mesin di lantai pabrik, lalu tarik algoritme itu ke Sumerian untuk mensimulasikan mesin yang sama menggunakan AI.

    "Mungkin ada dunia simulasi dalam AR dan VR di mana setiap karakter atau objek cerdas dari pelatihan pembelajaran mesin di dunia nyata, " kata Argenti. "Pada akhirnya, kamu ingin mencoba menciptakan kembali kenyataan dengan cara yang paling realistis. Hari ini kita bisa mendekat, tetapi belum ada dari sudut pandang perilaku hingga mensimulasikan bagaimana hal-hal sebenarnya bekerja."

    Meteorologi Simulasi Weatherbug

    Ketika Amazon membawa saya melalui beberapa demo pelanggan Sumeria, saya awalnya terkejut ketika yang pertama adalah aplikasi cuaca.

    Tetapi seperti yang dijelaskan oleh General Manager WeatherBug, Olivier Vincent, realitas virtual jauh lebih masuk akal untuk data cuaca daripada yang Anda kira. Ketika orang-orang mulai memeriksa cuaca mereka di aplikasi yang bertentangan dengan menonton ramalan di TV, Vincent mengatakan laporan cuaca telah kehilangan salah satu sentuhan terbaik mereka: ahli cuaca lokal Anda di depan layar hijau.

    "Cuaca adalah tentang memberitahumu apa yang terjadi pada waktu tertentu di tempat tertentu. Kamu bisa melakukannya dengan cara 2D yang bagus di aplikasi untuk melihat sekilas, tapi kami tahu bagaimana cuaca dan wanita yang populer selama bertahun-tahun, " kata Vincent. "Jadi idenya adalah untuk memperkenalkan kembali orang cuaca itu dalam pengalaman yang lebih mendalam di aplikasi."

    WeatherBug membangun adegan Sumeria dengan studio berita virtual dengan meja jangkar dan layar hijau, dan menjatuhkan host standar Cristine Amazon sebagai ahli meteorologi. Aplikasi ini menarik data cuaca saat ini untuk lokasi Anda yang kemudian akan dibacakan oleh tuan rumah kepada Anda sebagai bagian dari ramalan cuaca yang dipersonalisasi. Dari aplikasi WeatherBug utama, Vincent meluncurkan penampil VR yang diperbesar melalui model 3D Manhattan saat Cristine memberikan ramalan, lengkap dengan suhu tinggi dan rendah, dan kepingan salju yang jatuh.

    Addison, Pengasuh Virtual

    Perusahaan teknologi manajemen kesehatan yang berbasis di New Mexico Electronic Caregiver memiliki pengalaman Sumeria yang jauh berbeda.

    Perusahaan ini menawarkan teknologi untuk orang tua seperti yang dapat dikenakan dengan tombol bantuan medis, tetapi juga membangun solusi yang disebut Addision Care, yang memotong biaya perawatan di rumah dan menggunakan AI percakapan untuk menilai risiko jatuh pasien pasien lansia. Perusahaan ini merilis kios ke apotek, rumah sakit, dan dokter yang menganalisis cara berjalan pasien menggunakan pembelajaran mesin. Perangkat lunak ini juga menggunakan Addison, host kustom Sumeria, untuk memandu pengguna melalui kuesioner verbal tentang riwayat musim gugur mereka.

    "Membuat manula untuk mengadopsi teknologi tidaklah mudah, " kata Electronic Caregiver CTO Bryan Chasko. "Semakin membaik, teknologi suara akan melibatkan pasar itu. Anda tidak akan pernah membuat mereka duduk di depan keyboard dan mouse, tetapi dengan Addison mereka hanya bisa mengobrol."

    Electronic Caregiver telah bekerja di Addison selama bertahun-tahun, mengembangkan karakter 3D menggunakan Amazon Lex dan Polly. Perusahaan ini adalah salah satu pelanggan AWS yang membantu Amazon membuat konsep titik sakit yang bisa diatasi dengan Sumerian dan cara mengotomatisasi pipa pembuatan aplikasi AR / VR.

    Judah Tveito, Pengembang Virtual di Electronic Caregiver, mengatakan Sumeria mengambil proses yang telah mereka kerjakan selama berbulan-bulan dan mengubahnya menjadi beberapa klik. Perusahaan juga bekerja pada aplikasi seluler Addison.

    Pengasuh elektronik akhirnya membayangkan Addison sebagai pengasuh virtual di rumah, kata Chasko. Untuk pengguna usia lanjut yang hidup sendiri, AI dapat melakukan hal-hal seperti mengingatkan mereka untuk minum obat atau secara otomatis menelepon 911 jika ada jatuh atau darurat medis lainnya.

    "Salah satu masalah terbesar yang kami rasa bisa atasi adalah keterasingan yang dirasakan para manula ketika mereka hidup sendirian, " kata Chasko. "Kami benar-benar ingin memiliki lingkungan rumah 24/7 permanen di mana ketika Anda tidak berbicara dengan Addison Anda di kamar mandi dan Anda jatuh, hanya bisa berteriak, 'Saya butuh bantuan' bisa menyelamatkan banyak nyawa."

    Penghasil Uang: B2B dan IoT

    Amazon banyak berbicara tentang bagaimana aplikasi Sumeria dapat hidup dalam signage digital interaktif. Bayangkan seseorang berjalan melalui lobi hotel, mal, atau stadion dan melihat seorang tuan rumah berjalan bersama mereka di layar. Ini mungkin terdengar sedikit menyeramkan, tetapi host juga dapat memproses informasi kontekstual seperti lokasi untuk mengubah iklan menjadi percakapan yang dipersonalisasi. Argenti melihat host sebagai ekstensi virtual dari merek perusahaan yang dapat berubah sesuai dengan kebutuhan bisnis.

    "Jika Anda meletakkan aplikasi ini di suatu tempat dengan kamera, Anda dapat membayangkan karakter 3D terlibat dengan Anda secara pribadi: mengetahui siapa Anda, mungkin terakhir kali Anda berada di venue, atau bahkan hal terakhir yang Anda pesan, " kata Argenti.

    "Sebuah kapal pesiar adalah contoh yang bagus. Tuan rumah mungkin mengatakan 'Hei, berdasarkan di mana Anda berada di kapal sekarang, pemesanan Anda dalam 20 menit, Anda tidak akan berhasil. Apakah Anda ingin saya mendorongnya kembali?" 15 menit? Ada juga aspek visual dari pengalaman yang Anda buat kembali. Seorang tuan rumah yang berbicara dengan Anda tentang perjalanan akan terlihat berbeda dari orang yang berbicara tentang strategi keuangan Anda. Menambahkan informasi lokasi dapat memiliki karakter berubah tergantung di mana mereka menemukan diri mereka sendiri; cara mereka berpakaian, dan cara mereka bergerak, infleksi yang mereka miliki."

    Amazon sedang mengeksplorasi berbagai aplikasi B2B dan IoT untuk pelanggan Sumeria. Di bidang industri, Argenti mengatakan Nokia menyatukan sistem dengan sensor dan visualisasi untuk memantau lingkungan di dalam kontainer pengiriman untuk mengukur hal-hal seperti suhu interior dan penyerapan guncangan tanpa benar-benar membukanya.

    "Anda dapat membayangkan dunia AR di mana kami menghubungkan jutaan perangkat ke AWS dan mendapatkan banyak data sensorik yang berasal dari dunia nyata, " katanya. "Lalu kita bisa menggunakan AR dengan triangulasi untuk mengidentifikasi objek dan menampilkan informasi yang relevan di atasnya. Ada penerapan besar pada apa pun yang berkisar dari layanan dan perbaikan hingga pemantauan, keselamatan, dan sebagainya."

    Ada juga kemungkinan e-commerce yang luas ketika Anda bekerja dengan aset virtual. Model 3D apa pun di Sumerian yang berasal dari katalog belanja Amazon sendiri berpotensi menghasilkan biaya referensi pengembang jika Anda menambahkannya ke adegan AR / VR. Ini cara bagi perusahaan dan bisnis kecil dan pengembang independen di AWS untuk memonetisasi aplikasi Sumeria mereka.

    Argenti membayangkan banyak peluang crossover antara divisi ritel Sumeria dan Amazon.

    "Kami dapat menjembatani beberapa pekerjaan yang dilakukan oleh tim ritel kami dengan perabot rumah tangga, elektronik rumah tangga, dan barang bernilai tinggi lainnya untuk membuat model 3D, " katanya. "Kalau begitu, kamu bisa menggunakannya untuk ruang foto yang realistis. Bagaimana cara mengatur loteng modern? Mebel macam apa yang kita atur?"

    Semuanya Datang Kembali ke AWS

    Membangun jembatan ke semua perangkat dan platform AR / VR di luar sana adalah cara cerdas untuk menurunkan penghalang untuk masuk ke pengembangan AR / VR, tidak hanya untuk perusahaan B2B tetapi juga pengembang pada umumnya. Pada saat yang sama, insentif bisnis yang paling menarik di balik Sumerian adalah sebagai alat untuk mendorong penggunaan AWS yang lebih luas. Itu benar untuk pelanggan lama yang mencoba layanan baru, dan untuk pengguna Sumeria baru yang kemudian mulai menggunakan penyimpanan, komputasi, pemrosesan, AI, dan layanan Amazon lainnya karena mereka semua terintegrasi ke dalam pengalaman. Model penetapan harga juga menarik, karena Amazon tidak mengenakan biaya di muka. AWS hanya mengenakan biaya untuk apa yang Anda gunakan.

    Itu semua adalah bagian dari apa yang Amazon lihat sebagai lingkaran yang lebih besar di mana semuanya mengalir melalui AWS. Data berasal dari perangkat IoT, diproses oleh fungsi AWS Lambda, digunakan pada AWS Greengrass untuk sampai ke AWS IoT di mana ia melatih modul pembelajaran mesin, dan akhirnya ditarik sebagai model 3D ke visualisasi AR di Sumerian.

    Visi Amazon Untuk Masa Depan AR / VR Kami

    Amazon berharap Sumeria dapat berperan dalam memacu industri ini untuk membuat produk pasar massal 3D dan menekan biaya. Di sisi AR, Argenti mengatakan enabler dasar sudah ada berkat ARKit dan ARCore. Dia mengatakan titik kritis akan datang ketika ada cukup aplikasi dan konten video dari pengembang. Di sisi VR, perubahan besar yang ingin dilihat Amazon adalah perangkat keras yang turun harganya, menjadi kurang kikuk untuk dipakai, dan nirkabel.

    "Ketika itu terjadi dan Anda bisa memakai pengalaman VR seperti sepasang kacamata, VR akan benar-benar lepas landas, " kata Argenti. “Saya pikir itu harus sealami menonton video di tablet atau menyalakan TV sebelum siap untuk konsumsi umum pada tingkat yang sama dengan layar lain yang kita miliki saat ini. Mengembangkan seluruh ekosistem di sekitarnya dari pembuat konten, pengiklan, pengguna akhir, dan perusahaan yang melayani pengguna tersebut adalah cara Anda melakukannya."

    Argenti juga menggarisbawahi pentingnya imersivitas dalam pengalaman realitas virtual dan campuran. Satu lagi kasus penggunaan target Amazon untuk aplikasi Sumeria adalah pendidikan dan pelatihan. Apakah Anda belajar cara menggunakan perangkat medis, layanan kendaraan, atau belajar bahasa baru, ia mengatakan ini tentang menjatuhkan Anda di lingkungan yang terasa sedalam mungkin seperti dunia nyata.

    "Anda bisa duduk di bistro Prancis dan belajar bahasa tanpa benar-benar berada di sana, " katanya. “Avatar tuan rumah berbicara bahasa Prancis kepadamu. Menu dalam bahasa Prancis. Dan kemudian dalam kenyataan itu, Anda mungkin secara otomatis dapat menyentuh menu dan melihatnya menerjemahkan, menggerakkan jari Anda di atas item untuk melihat kata-kata berubah menjadi bahasa yang berbeda. Begitu banyak pendidikan yang kontekstual, dan sebagai alat pembelajaran, memiliki pengalaman melibatkan semua indera Anda sangat kuat."

Di dalam Sumeria, taruhan besar amazon pada augmented reality dan virtual