Mengenal Teknologi Real-Sense

Presentasi berjudul: "Mengenal Teknologi Real-Sense"— Transcript presentasi:

1 Mengenal Teknologi Real-Sense
Putu Yuwono Kusmawan

2 Pengantar Perceptual Computing Interaksi manusia dgn computer
Kemampuan computer utk mengetahui apa yg terjadi disekitarnya. Interaksi manusia dgn computer Masa silam: mouse – keyboard, sentuhan, suara. Masa datang: natural: tubuh manusia (wajah, tangan, bola mata).

3 Teknologi Real-Sense Teknologi perceptual computing buatan Intel.
Komponen: Hardware: Kamera 3D Mic Software: Perceptual library Sumber:

4 Hardware Real-Sense Color Sensor IR Sensor IR Laser Projector
Imaging Processor Microphone

5 Jenis-jenis Kamera (1/3)
Kamera seri F200 & SR300 Serupa dengan PC webcam konvensional. Short-range laser projector.

6 Jenis-jenis Kamera (2/3)
Kamera seri R200 Back-facing camera. Long-range laser projector.

7 Jenis-jenis Kamera (3/3)
Kamera versi snapshot Built-in camera: terpasang langsung dibadan tablet, smartphone, laptop & desktop. Dell Venue

8 Software Real-Sense (SDK)
Tujuan Memudahkan developer utk berinovasi dgn teknologi Intel RealSense. Bahasa Pemograman C++, C#, Java, Processing Download

9 SDK System Requirements
Hardware CPU: Intel 4th Gen (Haswell) or later. HDD: 8GB USB 3.0 Software OS: Win 8.1 / 10 (64-bit) Visual Studio .NET 4.0 framework (min) JDK 1.7.0_11 (min) Processing (min) Unity Pro 4.1 (min) Sumber:

10 Arsitektur Perangkat Lunak
Sumber:

11 Class Hierarcy Sumber:

12 Fitur-fitur SDK 3D Scan Background Removal Depth Photo
Scene Perception Gesture Recognition Face Recognition Sumber:

13 Fitur-fitur Real-Sense SDK
3D Scan Face Tracking and Recognition Hand Tracking and Gesture Recog (F200/SR300) Scene Perception (R200) Speech Recognition User Segmentation (F200/SR300) Depth Photography and Videography (R200)

14 Proses scan 3 dimensi (sumber)
3D Scan Pemindaian objek secara 3 dimensi. Objek Asli Model 3D Proses scan 3 dimensi (sumber)

15 Aplikasi 3D Scan Permainan Museum Replikasi wajah atau tubuh pemain.
Restorasi objek-objek bersejarah (3D printing). Patung bersejarah karya Tullio Lombardo yang rusak dapat direstorasi dgn teknologi 3D scanning and printing. Sumber

16 Face Tracking and Recognition
Mampu untuk mendeteksi Fitur wajah (78 titik) Orientasi wajah (pitch, yaw, rool) Ekspresi wajah (mata tertutup, mulut terbuka) Orientasi wajah Fitur wajah

17 Fitur-fitur khusus Pengenalan wajah Pulse detection Gaze tracking
Online face registration and recognition. Robust terhadap berbagai pose dan ekspresi wajah. Jarak wajah dgn kamera 0.3 – 1.5 meter. 20 wajah yg berbeda. Pulse detection Deteksi denyut nadi berdasarkan perubahan warna wajah. Gaze tracking Tracking arah gerakan mata.

18 Aplikasi Face Tracking & Recog.
Sistem Keamanan Biometric security system (notebook) Deteksi emosi wajah Marah, senang, sedih, dll.

19 Hand Tracking Pelacakan posisi tangan secara real-time dgn menggunakan depth camera. Batasan 22 titik pada telapak tangan. Ukuran tangan: min. 5,5 cm. Jarak tangan: 20 – 85 cm. Kecepatan: 2 m/s.

20 Aplikasi Hand Tracking
Touchless Controller Gaming Hand gesture recognition

21 Hasil process virtual-reality
Scene Perception Membuat representasi digital dari lingkungan yg diobservasi secara real-time. Kondisi asli 1 Hasil scanning 2 Hasil process virtual-reality 3

22 Fitur lain Scene Perception
Pengukuran dimensi objek secara otomatis (panjang, lebar, tinggi)

23 Speech Recognition Fitur Dictation: mengubah ucapan menjadi teks.
Synthesis: mengubah teks menjadi ucapan. Command and control Input: sekumpulan kata perintah. Output: notifikasi bila kata perintah terucap.

24 User Segmentation Memisahkan bagian tubuh user dgn background secara real-time.

25 Aplikasi User Segmentation
Proses pemisahan objek dgn background menggunakan latar berwarna hijau (green-screen). Teknologi green screen akan dapat tergantikan dengan teknologi kamera 3 dimensi.

26 Depth Photography &Videography
Teknik fotografi & videografi yang dapat menangkap gambar secara 3 dimensi. Gambar Asli Gambar Rekayasa Artificial Bokeh

27 Contoh-contoh Aplikasi

28 Kagura: Motion Perform Instrument

29 Personify: Live Video Conference

30 Z Vector Touch: Sound Reactive

31 IRFaceRig: Real-time Avatars

32 Kesimpulan Teknologi RealSense adalah
Seperangkat sensor Gambar (3D): Color & depth camera Suara: microphone Teknologi ini memudahkan kita untuk: Merekam objek 3 dimensi Berinteraksi lebih natural dgn komputer

33 Kontak Diskusi Bagi yang ingin sharing dan diskusi lebih lanjut, silakan hubungi: Bagi yang ingin bergabung dengan mailing list kami silakan hubungi admin kami di: Dengan Subject ”[Permohonan Subscribe Milis]“

34 Seeing is believing. Listening is understanding. Sharing is inspiring.
© 2015 Seeing is believing. Listening is understanding. Sharing is inspiring.