Обучение роботов чтению

В настоящее время прогресс робототехники в основном сводится к объединению уже существующих элементов. Возьмите стандартного робота, добавьте распознавание символов и синтез речи, и у вас будет робот, который может читать сказку на ночь …

Исследователи из Пенсильванского университета научили робота распознавать текст при его перемещении и читать его вслух. Конечно, был ряд роботов, разработанных специально для чтения книг, и в прошлом году был продемонстрирован робот из Великобритании, который перемещается, распознает и читает текст.

Робот из Пенсильванского университета отличается тем, что он не был разработан как читающий робот, он начал свою жизнь как «нормальный» нечитающий робот, которого исследователи взяли и научили читать.
GRASP PR2 может работать с различными шрифтами и даже с рукописным текстом, а также может работать с текстом под разными углами. В этом видео вы можете увидеть, как аспирант Мэнлун Чжу заставляет робота преодолевать трудности:

Иногда паузы кажутся почти эффектными, но мы знаем, что это больше связано со временем обработки. Это также может стать очень раздражающим, поскольку оно катится по коридору, читая вслух все и вся. Конечно, вы могли — и люди уже сделали — реализовать ту же идею, используя статическую камеру и машину, но наблюдение за движением робота, поиском текста и его чтением имеет дополнительное измерение «индивидуальности».
Разве вы не хотите просто нацарапать граффити и посмотреть, что произойдет?
А если серьезно, то передвижная платформа, которая может читать, открывает возможность роботу собирать данные о своем мире. Возможно, это плюс некоторые методы семантической обработки — способ обучения роботов. Если вы смотрели фильм «Короткое замыкание» (1986), то он может показаться слишком знакомым. Возможно, PR2 следует запрограммировать так, чтобы он кричал «Ввод» каждый раз, когда видит что-то, что нужно прочитать!
Программы, лежащие в основе способности чтения, имеют открытый исходный код и будут совместно использоваться через библиотеку операционной системы роботов (ROS), поэтому, если у вас есть старый неграмотный робот (как и у вас), вы можете проверить код (http: // www.ros.org/wiki/literate_pr2) и научите свой собственный автомат читать.