Antarmuka AR untuk membuat sketsa responsif
Computer

Antarmuka AR untuk membuat sketsa responsif


Kredit: Suzuki et al.

Para peneliti di University of Calgary, Adobe Research dan University of Colorado Boulder baru-baru ini membuat antarmuka augmented reality (AR) yang dapat digunakan untuk menghasilkan sketsa, grafik, dan visualisasi yang responsif. Karya mereka, yang awalnya dipublikasikan sebelumnya di arXiv, memenangkan penghargaan Best Paper Honorable Mention dan Best Demo Honorable Mention di ACM Symposium on User Interface Software and Technology (UIST’20).

“Proyek kami awalnya dimulai dari motivasi sederhana yang memungkinkan pengguna untuk memvisualisasikan fenomena dunia nyata melalui sketsa interaktif di AR,” Ryo Suzuki, salah satu peneliti yang melakukan penelitian tersebut, mengatakan kepada TechXplore. “Motivasi ini berasal dari pengamatan kami terhadap pendidikan kelas fisika, di mana eksperimen yang dilakukan oleh guru sering menjadi bagian integral dari pembelajaran fisika.”

Menjelaskan fenomena fisik kepada siswa terkadang cukup menantang. Ini karena memahami sepenuhnya fenomena ini membutuhkan penggambaran bagaimana terjadinya dan seperti apa penampakannya, alih-alih hanya mempelajari teori yang terkait dengannya. Alat interaktif yang memungkinkan guru fisika menjelaskan konsep dengan cara yang dinamis dan menarik dapat menjadi nilai yang besar, karena mereka dapat meningkatkan pemahaman siswa tentang topik yang dibahas dalam pelajaran mereka.

RealitySketch, platform yang dibuat oleh Suzuki dan rekan-rekannya, memungkinkan pengguna untuk menghasilkan grafik yang dinamis dan responsif yang dapat divisualisasikan di atas papan, dinding, atau objek lain di dunia nyata. Hal ini memungkinkan siswa untuk memperoleh gambaran yang lebih baik tentang fenomena fisik yang coba dijelaskan oleh guru kepada mereka, dengan mengamati mereka secara langsung dalam gerakan.

RealitySketch: Antarmuka AR untuk membuat sketsa responsif

Kredit: Suzuki et al.

“Dulu, membuat visualisasi seperti itu adalah proses yang memakan waktu, membutuhkan langkah editing video atau pasca produksi yang terpisah,” jelas Suzuki. “Sebaliknya, kami bertanya-tanya: bagaimana jika pengguna dapat secara langsung membuat sketsa visualisasi dinamis ke dunia nyata dalam waktu nyata, sehingga mereka dapat secara dinamis menganimasikan dan memvisualisasikan gerakan objek fisik?”

RealitySketch didasarkan pada Apple ARKit, platform AR seluler yang memungkinkannya menyematkan sketsa dinamis ke lingkungan dunia nyata. Awalnya, pengguna membuat sketsa sederhana dengan menggambar di layar sentuh menggunakan jari atau pena digital. Elemen yang mereka buat sketsa kemudian dihamparkan ke tampilan kamera di dunia nyata.

“Fitur paling unik dari RealitySketch adalah mendukung animasi real-time dari elemen sketsa berdasarkan gerakan dunia nyata,” kata Suzuki.

Kredit: Suzuki et al.

Meskipun ada antarmuka sketsa berbasis AR yang tak terhitung jumlahnya di pasaran saat ini, sebagian besar solusi yang dikembangkan sejauh ini berfokus pada penyematan grafik statis ke dunia nyata. Contoh alat ini termasuk Pronto, SybiosisSketch, dan PintAR, serta platform komersial, seperti Google Just a Line atau DoodleLens. Alih-alih hanya mengizinkan pengguna untuk membuat sketsa statis, RealitySketch memungkinkan penyematan grafik dinamis dan interaktif yang dapat mengikat objek nyata di lingkungan pengguna dan merespons gerakan mereka.

“RealitySketch mengintegrasikan pelacakan objek dan visualisasi berbasis AR,” kata Suzuki. “Pertama, ini melacak objek fisik dengan visi komputer. Saat pengguna mengetuk objek (misalnya, bola pendulum) di iPad, sistem mulai melacak objek berdasarkan warnanya. Semua elemen sketsa terikat ke objek yang dilacak ini, sehingga saat objek fisik bergerak (misalnya, saat pengguna meraih, bergerak, mendorong, melempar, dll. objek), elemen sketsa juga dianimasikan berdasarkan gerakan yang diharapkan untuk ditampilkan. “

Suzuki dan rekan-rekannya mengevaluasi antarmuka yang mereka buat dalam penelitian yang melibatkan para guru di mahasiswa di University of Calgary. Para peserta yang mereka rekrut sangat senang dengan RealitySketch dan tampak sangat bersemangat tentang potensinya untuk menambah eksperimen fisika.

RealitySketch: Antarmuka AR untuk membuat sketsa responsif

Kredit: Suzuki et al.

Sekarang, karena begitu banyak siswa menghadiri pelajaran secara online karena pandemi COVID-19, antarmuka yang dibuat oleh Suzuki dan rekan-rekannya terbukti sangat berharga. Faktanya, RealitySketch dapat membuat pengajaran jarak jauh lebih menarik, misalnya memungkinkan guru untuk merekam video eksperimen fisika dinamis dan membagikannya dengan siswa mereka, sehingga mereka bisa mendapatkan pemahaman yang lebih baik tentang konsep dan fenomena yang dijelaskan selama perkuliahan.

“RealitySketch juga menunjukkan potensi domain aplikasi yang lebih luas di luar pengajaran,” kata Suzuki. “Meskipun awalnya kami berfokus pada penjelasan konsep matematika dan fisika, pengguna kami sangat tertarik dengan skenario aplikasi lain, seperti pelatihan olahraga, eksplorasi desain, dan antarmuka pengguna yang nyata.”

RealitySketch: Antarmuka AR untuk membuat sketsa responsif

Kredit: Suzuki et al.

Selain menguji platform mereka dalam pengaturan ruang kelas, Suzuki dan rekan-rekannya mendemonstrasikan potensinya untuk berbagai aplikasi yang tidak terkait dengan pendidikan. Misalnya, mereka menunjukkan bahwa hal itu dapat digunakan oleh pelatih olahraga untuk menghasilkan visualisasi waktu nyata dan analisis data terkait kebugaran, misalnya, untuk menunjukkan lintasan bola waktu nyata kepada para pemain bola basket yang memungkinkan mereka untuk mencetak gol, atau untuk membuat yoga. sesi yang lebih menarik dengan menghasilkan visualisasi postur tubuh tertentu.

RealitySketch: Antarmuka AR untuk membuat sketsa responsif

Kredit: Suzuki et al.

“Kami tertarik untuk mengembangkan proyek ini lebih lanjut ke depannya,” Suzuki. “Karena ini adalah hasil kolaborasi antara Adobe Research (Rubaiat Habib Kazi, Li-Yi Wei, Stephen DiVerdi, Wilmot Li) dan University of Calgary (saya) / University of Colorado Boulder (Ph.D. penasihat Prof. Daniel Leithinger), kami yakin bahwa pekerjaan ini akan menginspirasi lebih banyak penelitian dan produk yang mendukung kreativitas yang mendalam, yang akan sepenuhnya mewujudkan potensi AR sebagai media komputasi dinamis. ”


RoomShift: Lingkungan haptik dan dinamis berskala ruangan untuk aplikasi VR


Informasi lebih lanjut:
Ryo Suzuki dkk. Sketsa Realitas, Prosiding Simposium ACM Tahunan ke-33 tentang Perangkat Lunak dan Teknologi Antarmuka Pengguna (2020). DOI: 10.1145 / 3379337.3415892

ryosuzuki.org/realitysketch/

© 2020 Science X Network

Kutipan: RealitySketch: Antarmuka AR untuk membuat sketsa responsif (2020, 3 Desember) diakses 3 Desember 2020 dari https://techxplore.com/news/2020-12-realitysketch-ar-interface-responsive.html

Dokumen ini memiliki hak cipta. Selain dari transaksi yang adil untuk tujuan studi atau penelitian pribadi, tidak ada bagian yang boleh direproduksi tanpa izin tertulis. Konten disediakan untuk tujuan informasi saja.




Halaman Ini Di Persembahkan Oleh : Pengeluaran HK