Mit PC (WIN10) und Augensteuerung Roboterarm steuern

[0men]

Moin,

ich arbeite mit behinderten Menschen zusammen. Wir digitalisieren Akten für Kunden. Nun haben wir einen Menschen, der nur mit einer Augensteuerung den PC bedienen kann. Das alles über Windows 10.
Um das Papier blattweise in den Scanner zu legen, danach herausholen und ablegen plus Kontrolle, würde ich gerne einen Roboterarm mit Unterdruck für den Blatttransport einsetzen. Zum einen muss er nicht viel Gewicht heben können, zum anderen muss er aber das Blatt umdrehen können. Das ganze soll mit einem PC realisiert werden.

Zu meiner Person kurz: Ich bin über 60 Jahre alt, habe mit 3D Druck Erfahrung (Ocotprint/Raspberry PI Kenntnisse), Löttechnik ist mir nicht fremd (RC Car im Maßstab 1:87 gebaut) und sonst jedweder Herausforderung aufgeschlossen.

Jetzt bräuchte ich tatsächlich erste Ansätze. Ist das machbar? Was benötigt man für die PC Steuerung (wäre sozusagen Maussteuerung)? Was wäre ein erster Bausatz für die Erforschung? Gibt es das irgendwo?

Ich bedanke mich sehr für Infos. Sollte ich hier in der Firma starten dürfen damit, werde ich berichten.

Viele Grüße
0men

[ARetobor]

Hallo Omen,
machbar ist es.
Wie sieht es mit Programmieren aus?
Das ist für Anfänger vielleicht hilfreich.:
https://docs.microsoft.com/de-de/windows/python/beginners

Gruß
ARetobor

[Andree-HB]

bezüglich Hardware geht schon Einiges, sogar mit schmalen Geldbeutel (zum testen):


https://www.youtube.com/watch?v=uSw5rsymjVY

https://www.elephantrobotics.com/en/mycobot-pi/
https://www.ebay.de/itm/363478453458

...muss natürlich Alles programmiert/gekoppelt werden

[0men]

Wie sieht es mit Programmieren aus?
Das ist für Anfänger vielleicht hilfreich.:
https://docs.microsoft.com/de-de/windows/python/beginners


Danke!
Wir haben hier jemand der Java programmieren könnte - wäre das ok?

Viele Grüße
0men

- - - Aktualisiert - - -


bezüglich Hardware geht schon Einiges, sogar mit schmalen Geldbeutel (zum testen):

https://www.elephantrobotics.com/en/mycobot-pi/
https://www.ebay.de/itm/363478453458

...muss natürlich Alles programmiert/gekoppelt werden

Das sieht schon gut aus. Müsste aber sicher sein das hinzubekommen bei rund 600 Euro ;)
Wie muss ich mir das vorstellen mit programmieren/koppeln?

Ich bekäme ein GO wenn es "für uns" hier machbar wäre.

Viele Grüße
0men

[Andree-HB]

...die Mechanik und deren Kosten wird Euer kleinstes Problem sein - die Umsetzung der Bedienung/Steuerung für Euren Kollegen wird die mit Abstand grösste Herausforderung sein.

[oberallgeier]

.. Sollte ich hier in der Firma starten dürfen damit, werde ich berichten ..
.. Umsetzung der Bedienung/Steuerung .. die mit Abstand grösste Herausforderung ..Die Umsetzung sehe ich genauso aufwendig - aber da ist ein Teil des Rades sicher irgendwo schon erfunden worden. Ich weiß nu nicht wie weit Du mit ".. starten dürfen .." eingeschränkt bist und ob das ne einzelne Lösung ist oder mehr. An Deiner Stelle würde ich mich mit dieser Frage/Aufgabenstellung an das FKIE/Fraunhofer-Gesellschaft in Wachtberg (https://www.fkie.fraunhofer.de/) (bei Bonn) wenden, ich würde erstmal einfach dort anrufen. (Das FKIE war früher Teil der FGAN in St. Augustin (https://de.wikipedia.org/wiki/Forschungsgesellschaft_f%C3%BCr_Angewandte_Naturwi ssenschaften) - da gibts sicher "Umsetzung von Augenbewegungen" satt; Hauptforschungsgebiete waren u.a. Mustererkennung, Ergonomie und Informationssysteme.)

Bei ner Fraunhofer-Gesellschaft würde ich als "einfacher Bürger" für so ein Projekt schon einige gute Ratschläge - oder mehr - erwarten, notfalls einen Hinweis auf weitere/andere Ratgeber.

Viel Erfolg noch!

[0men]

Moin und danke soweit.

Ich habe gestern mal das Fraunhofer Institut angemailt.

Nach einer Rücksprache mit dem Beschäftigten der programmieren kann, wäre auch eine Lösung über Raspberry PI mit Phyton möglich. Er traut sich das zu.
Mal sehen wie es weiter geht - ich werde berichten.

Viele Grüße
0men

[Andree-HB]

Vielleicht in dem Zusammenhang interessant:
https://www.jugend-forscht.de/projektdatenbank/auge-steuert-rollstuhl-eyetracking-mit-opencv.html
https://github.com/stepacool/Eye-Tracker