Báo cáo khoa học: “Combining POMDPs trained with User Simulations and Rule-based Dialogue Management in a Spoken Dialogue System”

Combining POMDPs Trained with User Simulations and Rule-based Dialogue Management in a Spoken Dialogue System

Tác giả: Sebastian Varges, Silvia Quarteroni, Giuseppe Riccardi, Alexei V. Ivanov, Pierluigi Roberti

Lĩnh vực: Department of Information Engineering and Computer Science, University of Trento

Nội dung tài liệu:

Nghiên cứu này trình bày một phương pháp phát triển hệ thống hội thoại nói bao gồm các bộ quản lý hội thoại dựa trên luật và có khả năng huấn luyện, các mô-đun hiểu và sinh ngôn ngữ nói, cùng với một kiến trúc hệ thống hội thoại toàn diện. Điểm cốt lõi của công trình này là việc thu hẹp khoảng cách giữa các mô hình hội thoại được viết thủ công (ví dụ: dựa trên luật) và các mô hình tính toán thích ứng như các bộ quản lý hội thoại dựa trên Quy trình Quyết định Quan sát được một phần (POMDP). Phương pháp này sử dụng học tăng cường để tính toán các quyết định về các bước hội thoại tối ưu một cách trực tuyến. Ứng dụng của hệ thống là một hệ thống thông tin du lịch cho chỗ ở và các sự kiện trong khu vực. Nghiên cứu cũng so sánh phương pháp POMDP với một hệ thống quản lý hội thoại dựa trên luật đã được sử dụng bởi người dùng thực, nhằm đánh giá hiệu quả của mô hình mới.

Mục lục chi tiết:

• 1 Reinforcement Learning-based Dialogue Management
• 1.1 The exploration/exploitation trade-off in reinforcement learning
• 1.2 User Simulation
• 2 Rule-based Dialogue Management
• 3 Data-centric System Architecture
• 4 Visualization Tool