ADVANCING HUMAN-ROBOT INTERACTION: DEEP LEARNING-BASED EMOTION AND GESTURE RECOGNITION FOR IVASTBOT

 0 Người đánh giá. Xếp hạng trung bình 0

Tác giả: Dang Cam Thach, Khoi Quang Doan, Thi Kim Duyen Ha, Manh Duy Ngo, Manh Tien Ngo, Nguyen Hiep Tran

Ngôn ngữ: eng

Ký hiệu phân loại:

Thông tin xuất bản: Tạp chí Khoa học và công nghệ - Trường Đại học Thành Đông, 2023

Mô tả vật lý: tr.61

Bộ sưu tập: Báo, Tạp chí

ID: 347990

In this paper, we introduce a novel approach to enhance the capabilities of the humanoid robot IVastBot by in- tegrating various software components. This integration enables IVastBot to effectively recognize and respond to a wide array of human gestures and behaviors. Through the utilization of the open-source MediaPipe Pose library and LSTM networks, IVastBot becomes proficient in generating contextually appropri- ate responses. Furthermore, we incorporate emotion recognition into the system using Convolutional Neural Networks (CNN). The entire recognition module seamlessly integrates into the Robot Operating System (ROS) architecture, resulting in efficient execution. Consequently, IVastBot achieves the ability to execute adaptive actions in response to human gestures and emotions, sig- nificantly enriching the intuitiveness and engagement of human- robot interactions
Tạo bộ sưu tập với mã QR

THƯ VIỆN - TRƯỜNG ĐẠI HỌC CÔNG NGHỆ TP.HCM

ĐT: (028) 36225755 | Email: tt.thuvien@hutech.edu.vn

Copyright @2024 THƯ VIỆN HUTECH