AI Lab, bài báo được chấp nhận tại IROS 2026, hội nghị soi kèo bóng đá trực tuyến đầu trong lĩnh vực robot

■Nền
Kể từ năm 2017, "Phòng thí nghiệm AI" đã tham gia nghiên cứu chung với Trường Khoa học Kỹ thuật sau đại học, Đại học Osaka, với mục đích thiết lập dịch vụ khách soi kèo bóng đá trực tuyến và công nghệ quảng cáo bằng cách sử dụng các tác nhân đàm thoại như robot và thu thập kiến thức khoa học Từ năm 2020, Dự án Nghiên cứu và Phát triển Moonshot^※4

「」
Tác giả: Yūga Yano (Viện Công nghệ Kyushu/Phòng thí nghiệm AI của CyberAgent), Yuki Okafuji, Ryo Miyoshi, Sanae Yamashita, Yoshiteru Ohira (CyberAgent AI Lab/Đại học Osaka)

Trong những năm gần đây, với sự phát triển nhanh chóng của các mô hình ngôn ngữ quy mô lớn (LLM), hoạt động nghiên cứu và phát triển đang tiến tới việc giới thiệu các robot dịch vụ khách soi kèo bóng đá trực tuyến tự động tương tác với khách soi kèo bóng đá trực tuyến Tuy nhiên, các hệ thống thông thường thường được thiết kế để bắt đầu và tiếp tục đối thoại dựa trên thông tin giọng nói và không thể nắm bắt được hành vi phi ngôn ngữ (hành vi phi ngôn ngữ) như đến gần robot hoặc vẫy tay, điều này đặt ra vấn đề là không thể tiến hành đối thoại linh hoạt để đáp lại hành vi phi ngôn ngữ của người dùng
Mục đích của nghiên cứu này là hiện thực hóa một hệ thống đối thoại trong đó robot có thể tự động cung cấp dịch vụ khách soi kèo bóng đá trực tuyến bằng cách hiểu ý định của khách soi kèo bóng đá trực tuyến từ hành vi phi ngôn ngữ của họ

・ Thu thập dữ liệu dịch vụ khách soi kèo bóng đá trực tuyến trong thế giới thực và phân tích hành vi của khách soi kèo bóng đá trực tuyến
Kết quả của việc đưa rô-bốt điều khiển từ xa vào một cửa soi kèo bóng đá trực tuyến bán lẻ thực tế cũng như thu thập và phân tích dữ liệu cuộc trò chuyện của dịch vụ khách soi kèo bóng đá trực tuyến, cho thấy rằng 15,3% lời nói của rô-bốt do người điều hành từ xa thực hiện không phải do lời nói của khách soi kèo bóng đá trực tuyến mà do hành vi phi ngôn ngữ của khách soi kèo bóng đá trực tuyến (ví dụ: rô-bốt nói "xin chào" khi khách soi kèo bóng đá trực tuyến vẫy tay) Để hiện thực hóa phản hồi của người vận hành từ xa này như một cuộc đối thoại dịch vụ khách soi kèo bóng đá trực tuyến tự động của robot, nghiên cứu này đã đề xuất hệ thống sau
 

・Phát triển mô hình nhận biết các hành vi phi ngôn ngữ thường xảy ra tại các cửa soi kèo bóng đá trực tuyến thực tế trong thời gian thực
Chúng tôi đã phát triển một mô hình có thể nhận biết 9 loại hành vi phi ngôn ngữ như tiếp cận và vẫy tay từ khách soi kèo bóng đá trực tuyến với tốc độ trung bình 0,125 giây (8 khung hình/giây) từ hình ảnh từ camera lắp trên robot Hơn nữa, bằng cách kết hợp mô hình nhận dạng đã phát triển vào mô hình đối thoại, chúng tôi đã tạo ra một robot dịch vụ khách soi kèo bóng đá trực tuyến tự động không chỉ có thể phản hồi lời nói của khách soi kèo bóng đá trực tuyến mà còn có thể nói một cách tự nhiên để đáp lại hành vi phi ngôn ngữ của khách soi kèo bóng đá trực tuyến
 

■Tương lai
Kết quả nghiên cứu này dựa trên AI đối thoại với khách soi kèo bóng đá trực tuyến đã được nghiên cứu và phát triển cho đến nayHộ tốngAITrong tương lai, chúng tôi sẽ tiếp tục tiến hành nghiên cứu sâu hơn dựa trên nền tảng này, nhằm mục đích thương mại hóa và nâng cao hơn nữa công nghệ tương tác dịch vụ khách soi kèo bóng đá trực tuyến
"Phòng thí nghiệm AI" sẽ tiếp tục nghiên cứu các vấn đề công nghệ khác nhau thông qua sự hợp tác giữa ngành và học viện với các trường đại học và tổ chức học thuật, đồng thời nỗ lực nghiên cứu và phát triển nhằm mục đích hiện thực hóa "một thế giới nơi con người và robot có thể cùng tồn tại một cách tự nhiên"



※1: Liên kết với Viện Công nghệ Kyushu Tham gia thực tập nghiên cứu từ ngày 1 tháng 9 năm 2025 đến ngày 30 tháng 4 năm 2026
※2：
※3:IROS 2024(Thông cáo báo chí）
IRS 2025(Thông cáo báo chí）
※4：