Hệ thống giao tiếp không lời tương tác thời gian thực thông qua việc trích xuất đặc trưng ngữ nghĩa

Bài báo này đề xuất một hệ thống giao tiếp không lời thời gian thực mới từ các chỉ dẫn ngôn ngữ tự nhiên bằng cách kết hợp phương pháp trí tuệ nhân tạo vào môi trường ảo mạng (NVE). Chúng tôi trích xuất thông tin ngữ nghĩa như một ngôn ngữ trung gian từ văn bản đầu vào thông qua xử lý ngôn ngữ tự nhiên, và sau đó truyền trích xuất đặc trưng ngữ nghĩa (SFE), thực chất là một đại diện hành động được tham số hóa, đến các mô hình người máy 3-D khớp nối được chuẩn bị ở mỗi địa điểm từ xa. Khi SFE được nhận, con người ảo sẽ được hoạt hình hóa bằng SFE tổng hợp. Các thử nghiệm giữa ngôn ngữ ký hiệu Nhật Bản và ngôn ngữ ký hiệu Trung Quốc cho thấy hệ thống này tạo ra những hoạt hình thời gian thực cho các đại diện khi trò chuyện với nhau, không chỉ dựa trên văn bản hoặc các biểu tượng cử chỉ đã được định sẵn, do đó giao tiếp trở nên tự nhiên hơn. Hệ thống được đề xuất này cũng phù hợp cho việc đào tạo từ xa ngôn ngữ ký hiệu.