scholarly journals Local-HDP: Interactive open-ended 3D object category recognition in real-time robotic scenarios

2021 ◽  
pp. 103911
Author(s):  
H. Ayoobi ◽  
H. Kasaei ◽  
M. Cao ◽  
R. Verbrugge ◽  
B. Verheij
Keyword(s):  
Author(s):  
Zhiyong Gao ◽  
Jianhong Xiang

Background: While detecting the object directly from the 3D point cloud, the natural 3D patterns and invariance of 3D data are often obscure. Objective: In this work, we aimed at studying the 3D object detection from discrete, disordered and sparse 3D point clouds. Methods: The CNN is composed of the frustum sequence module, 3D instance segmentation module S-NET, 3D point cloud transformation module T-NET, and 3D boundary box estimation module E-NET. The search space of the object is determined by the frustum sequence module. The instance segmentation of the point cloud is performed by the 3D instance segmentation module. The 3D coordinates of the object are confirmed by the transformation module and the 3D bounding box estimation module. Results: Evaluated on KITTI benchmark dataset, our method outperforms the state of the art by remarkable margins while having real-time capability. Conclusion: We achieve real-time 3D object detection by proposing an improved convolutional neural network (CNN) based on image-driven point clouds.


2016 ◽  
Vol 1 (2) ◽  
pp. 177
Author(s):  
Unang Rio ◽  
Susi Erlinda ◽  
Dwi Haryono

Intisari  - Provinsi Riau terletak di lokasi yang strategis dan memiliki kekayaan keindahan alam dan budaya  yang  unik,  Riau  menawarkan  banyak  tempat  wisata  baik alam dan  budaya.  Tujuan  dari penelitian ini untuk membuat aplikasi  yang membantu masyarakat  untuk mendapatkan informasi objek wisata unggulan di Provinsi Riau. Salah satu faktor yang menyebabkan kurang berkembangnya sektor pariwisata di Provinsi Riau saat ini adalah karena pengelolaan informasi yang bersifat promosi dan belum mampu memaksimalkan ketersediaan teknologi informasi yang tersedia. Penggunaan teknologi augmented reality adalah teknologi yang menggabungkan benda maya tiga dimensi ke dalam  sebuah  lingkungan  tiga-dimensi  nyata  dan  kemudian  memproyeksikan  benda-benda  maya secara real time. Markerless objek wisata unggulan adalah bono surfing, balap alur, tongkang bahan bakar, pantai Rupat, istana siak dan Candi Muara Takus. pembuatan obyek dan membaca penanda scan dari kamera menggunakan teknik markerbase dan Markerless dengan objek Pelacakan metode 3D dan algoritma SIFT (Skala Fitur invarian Transform). Proses yang terkandung dalam deteksi obyek membaca gambar, mempertajam gambar dengan memanfaatkan High Pass Filter; membaca gambar dari metode SIFT bahwa proses akan menghasilkan deteksi titik. Hasil pengujian untuk melihat efek dari jarak antara smartphone kamera dengan spidol, jarak yang diperoleh sangat ideal untuk menampilkan objek 3D, sampai 40 cm. pengujian aplikasi ARRiauTouris mampu mendeteksi penanda dengan jarak dekat 10 cm dan jarak maksimum 67 cm, dan memperoleh waktu rata-rata untuk objek (mean) antara 0,80 detik menjadi 0,93 detik. Kata kunci: obyek wisata, augmented reality, 3D pelacakan objek, provinsi riau


2021 ◽  
Vol 11 (2) ◽  
pp. 95-102
Author(s):  
Nur Ameerah Abdul Halim ◽  
Ajune Wanis Ismail

Augmented Reality (AR) have been widely explored worldwide for their potential as a technology that enhances information representation. As technology progresses, smartphones (handheld devices) now have sophisticated processors and cameras for capturing static photographs and video, as well as a variety of sensors for tracking the user's position, orientation, and motion. Hence, this paper would discuss a finger-ray pointing technique in real-time for interaction in handheld AR and comparing the technique with the conventional technique in handheld, touch-screen interaction. The aim of this paper is to explore the ray pointing interaction in handheld AR for 3D object selection. Previous works in handheld AR and also covers Mixed Reality (MR) have been recapped.


2021 ◽  
Author(s):  
Zog Breaneslami Ridhoslaras Prasasti

Saat ini pemanfaatan teknologi informasi mengalami perkembangan pesat. Salah satu contoh yang digunakan dalam penyampaian informasi adalah teknologi Augmented Reality (AR). Pengguna dapat menvisualisasikan objek dalam bentuk 3D secara realtime sehingga AR banyak diimplementasikan di berbagai bidang, termasuk bidang pendidikan dan pembelajaran. Penelitian inian ini akan melakukan analisis cara kerja AR sebagai media pembelajaran Aksara Lampung. Hal ini dilakukan dalam upaya menjaga dan memelihara Aksara Lampung sendiri adalah salah satu Rendahnya minat belajar aksara Lampung siswa-siswi SD Sejahtera 4 Bandar Lampung digunakan Game Engine Unity serta Vuforia SDK agar aplikasi yang dibangun menjadi aplikasi berteknologi Augmented Reality (AR) dan menggunakan marker berupa kertas yang apabila diarahkan ke aplikasi akan terdeteksi dapat menampilkan visualisasi objek 3D. Aplikasi ini bermanfaat bagi siswa sekolah dasar yang sedang menempuh pelajaran aksara Lampung. Dari hasil pengujian yang telah dilakukan, dapat disimpulkan bahwa aplikasi yang dibangun mampu menampilkan visualisasi objek 3D serta mampu menarik minat siswa dalam mempelajari aksara Lampung. --- [ Currently, the use of information technology is experiencing rapid development. One example used in the delivery of information is Augmented Reality (AR) technology. Users can visualize objects in 3D in real-time so that AR is widely implemented in various fields, including education and learning. This study will analyze how AR works as a medium for learning Lampung script. This is done in an effort to maintain and maintain the Lampung script itself which is one of the low interest in learning Lampung script in Sejahtera 4 elementary school students Bandar Lampung by using the Unity Game Engine and Vuforia SDK so that the application built becomes Augmented Reality (AR) technology and uses markers in the form of paper that is directed to the application will be detected can display 3D object visualization. This application is useful for elementary school students who are taking Lampung script lessons. From the results of the tests that have been carried out, it can be concluded that the application built is able to display 3D object visualization and is able to attract students' interest in learning Lampung script. ]


Sign in / Sign up

Export Citation Format

Share Document