Właśnie coś podobnego chciałbym zrobić ale nie wykorzystując systemu wizyjnego. Obraz do analizy chcę brać bezpośrednio z ekranu urządzenia.
Twój filmik naprowadził mnie na coś takiego: Koncepcyjnie bardzo blisko

O pisaniu softu na mikrokontrolerach nie mam pojęcia więc trzeba będzie poszukać chętnego do współpracy lub innego rozwiązania (o ile takie istnieje). Sprzętowo nie powinno być problemów, bo faktycznie urządzenie nie potrzebuje dużej siły. Z pewnością do klikania nie da się wykorzystać gumki na sprężynce, przynajmniej na ekranie pojemnościowym, ale to nie problem.

A tak z innej beczki. Zrobienie takiego ramienia robota będzie dużo trudniejsze od strony programowania i elektroniki? Oczywiście w porównaniu do 3 osiowego pseudo plotera.

Informacyjnie powiem, że o elektronice mam minimalne pojęcie.
Chciałbym zrobić urządzenie które było by w stanie "obsługiwać" smartphone lub tablet. Wyobraźcie sobie mały ploter 3 osiowy tyle że zamiast kawałka materiału leży smartphone na którym to właśnie urządzenie symuluje palec człowieka. Dodam, że program który miałby sterować tym urządzeniem musi dostawać instrukcje do wykonania w czasie rzeczywistym. Ważna jest również prędkość przesuwu na osiach x,y.
W jaki sposób sterować takim urządzeniem? Albo od czego zacząć? Czy od budowy urządzenia, czy od zrobienia oprogramowania?

Chciałbym zbudować urządzenie pracujące w 3 osiach. Specyfika pracy tego urządzenia wyklucza wykorzystanie gotowych programów typu Mach3.
W jaki sposób można kontrolować pracą silników z poziomu komputera bez gotowych programów wykorzystujących Gkod?