Αντικείμενο του έργου είναι:
- η ανάπτυξη καινοτομικών αλγορίθμων ανάλυσης εικόνων και υπολογιστικής όρασης για την αποτελεσματική οπτική ανάλυση ακολουθιών βίντεο με σκοπό τον εντοπισμό και παρακολούθηση χειρονομιών,
- η παράλληλη συλλογή βίντεο σώματος (corpus) «κειμένων» της Ελληνικής Νοηματικής Γλώσσας (ΕΝΓ) και η επισημείωση (annotation) και γλωσσική μοντελοποίηση αντιπροσωπευτικών φαινομένων της ΕΝΓ,
- η αυτόματη αναγνώριση ενδεικτικών χειρονομιών της ΕΝΓ με συγκεκριμένη σημασία χρησιμοποιώντας αυτόματα συστήματα υπολογιστικής όρασης που έχουν προ-εκπαιδευθεί στο corpus, και
- η ολοκλήρωση των ανωτέρω σε ένα σύστημα πιλοτικής εφαρμογής τηλεχειρισμού ρομπότ με ένα υποσύνολο απλών χειρονομιών.
