План на курса
Въведение в интеракцията между човек и робот (HRI)
- Обиколка на HRI и неговата мултидисциплинарна природа
- Приложения в промишлеността, здравеопазването и сервисните роботи
- Принципи на дизайн, ориентирани към човека за интерактивни системи
Взаимодействие с глас и речен контрол
- Основи на разпознаването на речта и разбирането на естествения език
- Разработка на гласови команди и отговори, използвайки Python
- Интегриране на речни интерфейси с роботи на база ROS
Разпознаване на жестове и невербална комуникация
- Ролята на жестовете и тялния език в комуникацията между човек и робот
- Използване на компютърно зрение за разпознаване и класификация на жестове
- Имплементация на реално време за разпознаване на жестове с OpenCV и AI модели
Колаборативно и общо управление
- Принципи за сътрудничество между човек и робот и общо автономия
- Схеми за безопасност при физическо и когнитивно взаимодействие
- Интегриране на обратна връзка от датчици и адаптивно управление за съвместни задачи
Проектиране на мулtimodalни системи за взаимодействие
- Обединяване на глас, жестове и визуална обратна връзка
- Управление на контекста и намеренията на потребителя в мулtimodalни системи
- Имплементация на проста мулtimodalна прототип HRI в симулация
Хуманни фактори, етика и безопасност в HRI
- Хуманска перцепция, доверие и приемане на роботически системи
- Етични разглеждания в сътрудническата роботика
- Оценка на използваемостта и безопасността на интерфейсите за взаимодействие
Практически проект: Създаване на колаборативен робот с управление чрез глас и жестове
- Проектиране на архитектурата на системата и дефиниране на режимите на взаимодействие
- Имплементация на модули за реч и жестове
- Интегриране и тестене на пълния прототип HRI
Резюме и следващи стъпки
Изисквания
- Основно разбиране на концепции от роботиката и програмирането на Python
- Запознаност с интерфейси за човек-машинна комуникация или контролни системи
- Интерес към дизайн на взаимодействия, перцепция или приложени AI
Целева група
- Иследователи в HRI, изучаващи сътрудничество между човек и робот
- Проектиращи продукти за интерактивни или асистентски роботи
- Инженери, изучаващи мулtimodalни взаимодействия и контролни системи
Отзиви от потребители (2)
Осигуряване на необходимите материали (виртуална машина) за незабавно започване на упражненията и обяснение на основата на ROS2. Защо нещата работят по определен начин.
Arjan Bakema
Курс - Autonomous Navigation & SLAM with ROS 2
Машинен превод
неговото знание и използване на ИИ за роботика в бъдещето.
Ryle - PHILIPPINE MILITARY ACADEMY
Курс - Artificial Intelligence (AI) for Robotics
Машинен превод