Надо будет только сообщить программе что следить надо за ярким малоразмерным пятном заданного цвета, а то любые аномалии между камерой и экраном будут дублироваться (с увеличением!) на экран.

Разумеется. Я просто подумал, что, допустим, вот мы преобразовали на основе калибровки снимаемый камерой четырёхугольник в прямоугольник — и уже получим потенциально зашумлённую и обязательно не пиксель-в-пиксель совпадающую с экраном картинку, так что в любом случае надо будет делать что-то. Тут я неявно предполагаю, что программа пишется человеком с головой, а не без оной.
