Zastosowanie komunikacji głosowej do generowania elastycznych wzorców obiektów chwytanych przez robota współpracującego

W ostatnich latach roboty współpracujące odgrywają coraz istotniejszą rolę, także w przemyśle chemicznym. Ich praca jest często związana z chwytaniem obiektów identyfikowanych za pomocą systemu wizyjnego. Jedna z metod klasyfikacji obiektów na podstawie sygnatur ich zarysów zakłada tworzenie elastycznych wzorców konturów (FECT), umożliwiających automatyczne generowanie danych wejściowych do sieci neuronowej. Jej wadą jest pracochłonność opracowywania FECT przez użytkownika. Przedstawiono metodę efektywnego generowania FECT poprzez wykorzystanie interakcji multimodalnej (mowa, wskazywanie, tekst), uwzględniającej quasi-naturalny charakter fraz wypowiadanych przez użytkownika.

---

A method for efficiently creating flexible contour templates (FECT) using multimodal interaction (speech, pointing, text) was developed, taking into account the quasi-natural character of the phrases spoken by the user. The use of multimodal commands provides significant time savings in creating a flexible FECT pattern.