Kamera für die motorisierte Erstellung von Kugelpanoramen

[LeeMajors]

Hallo zusammen,


Projektziel
bei meinem Projekt geht es darum, vollautomatisch die Aufnahmen für ein Kugelpanorama zu erstellen. Das ganze in hoher Qualität, bedienerfreundlich und trotzdem nicht übertrieben teuer.


Vorgeschichte
Bisher arbeite ich mit einer Ricoh Theta V. Die Kamera macht 2 Aufnahmen und fügt diese automatisch zusammen - allerdings ist die Auflösung mit 5K sehr bescheiden. Ebenso wirft die Kamera nur JPGs raus. Der Nachfolger hat einen größeren Chip, 6K und kann RAWs auswerfen, kostet aber EUR 1.000,-. Die Bilder im Netz sind qualitativ zwar besser als der Vorgänger - von professioneller Qualität ist diese aber trotzdem noch weit entfernt.


Die Profis machen solche Aufnahmen mit einer professionellen KB Kamera und einem Nodalpunktadapter. Je nach Auflösung werden dann viele oder sehr viele Aufnahmen gemacht. Ob die Profis vollautomatisch arbeiten, weiß ich nicht. Es gab mal eine Lösung von GigaPan, aber die Firma gibt es scheinbar nicht mehr und die Lösung war auch nicht sehr flexibel. Aktuelle Lösungen gibt es noch von dji, allerdings drehen die Ronin Modelle im Schwerpunkt und nicht im Nodalpunkt. D.h. das schreit nach Problemen, wenn Objekte mal nah an der Kamera sind. Nebenbei hab ich auch keine professionelle KB-Kamera...


Raspberry Pi High Quality Kamera + 16mm Teleobjektiv
Diese Kombi habe ich einmal ausprobiert und war sehr überrascht, wie gut die Qualität ist. Wenn man das Objektiv etwas abblendet, schaffen es meiner Meinung nach alle 12 Megapixel bis auf den Sensor. Dort kommt durch den etwas größeren Sensor (Kompaktkamera-Niveau) auch kein Matsch, sondern scharfe Pixel an. Das Tolle ist ja, dass man das alles mit dem Raspi steuern kann und voll Kontrolle hat.

Anbei meine derzeit professionelle Apparatur... und einem Testbild. Es wurde aus mehreren Belichtungen automatisch auf dem Raspi zusammengebaut. Rechts daneben ein 1:1 Ausschnitt. Das Ergebnis ist meilenweit besser, als z.B. mit meinem Huawei P30 Pro.




Nodalpunkt
Um Kugelpanoramen zu erstellen muss sich die Kamera, bzw. das Objektiv um den sogenannten Nodalpunkt drehen. (https://de.wikipedia.org/wiki/Knotenpunkt_(Fotografie)) Dreht das Objektiv woanders, können die Einzelaufnahmen, besonders wenn Objekte nah an der Kamera sind, nicht ordentlich zu einem großen Panorama zusammengefügt werden. Um den zu ermitteln hab ich dann Teile einer alten mechanischen Steadycam benutzt:

nach meinen Berechnungen befindet sich der Nodalpunkt 25mm vom Objektivrand aus Richtung Kamera.

Software
Derzeit läuft die Software in Python und zur Bedienung gibt es ein Webinterface. Python unterhält sich mit der Website über eine Websocket-Verbindung. Ich steuere alles mit einem XBOX-Controller, damit ich später auch entfernt und berührungslos auslösen und bedienen kann. Die Kamera habe ich soweit im Griff. Ich kann jpgs oder 12Bit dngs aufnehmen, sowie auch Serienaufnahmen mit verschiednene Belichtungsstufen, um später daraus ein HDRI zu erstellen. Eine automatische HDRI Erstellung funktioniert zwar direkt auf dem Raspi, asynchron, allerdings lassen die Ergebnisse zu wünschen übrigen. (Mit HDRI stehe ich irgendwie auf Kriegsfuß - selbst mit Photoshop bekomme ich nur mäßige Ergebnisse raus.) Was prima funktioniert ist die Software https://www.picturenaut.de/.


Hardware
Außer Raspi 4B, HiQ-Cam, 16mm Tele setze ich eine schnelle 128GB SD Karte ein, weil bei kompletten Kugelpanoramen später 216 Aufnahmen erstellt werden müssen und die 12Bit-DNGs natürlich recht groß sind. Für die Bewegung werde ich 2 Dynamixel DYNAMIXEL XM430-W350-T einsetzen, weil ich da von einem anderen Projekt habe ...2 Dynamixel DYNAMIXEL XC430-W240-T würden es sicherlich auch tun - die kosten "nur" EUR 100,- / Stück. Als Spannungsversorgung nehme ich Turnigy 5200mAh Akku von Hobbyking. Die Servos werden direkt aus dem Akku versorgt, das Raspi bekommt seine 5V über einen Spannungsregler (https://www.reichelt.de/entwicklerbo...78.html?&nbc=1)
Und schließlich bekommt die Kamera ein 5 Zoll Touch-Display von Waveshare, welches direkt über DSI Interface mit dem Raspi verbunden wird. (HDMI-Adapter nehmen zu viel Platz weg und sind hier unnötig.)
Und ganz schließlich baue ich noch ein BNO055 Lagesensor ein, statt Wasserwaage.


Gehäuse
Ich wollte diesmal noch mal einen Versuch mit 3D Druck starten, nach einigen Hürden ist aber klar, dass ich doch wieder shapeways nehmen werde. Hier gibt es keine Fehldrucke, der Druckbereich darf viel größer sein und man kann frei konstruieren, ohne auf die Befindlichkeiten des 3D-Druckers eingehen zu müssen.


Die Konstruktion ist soweit durch, jetzt muss ich noch ein Bisschen prüfen, ob ich keinen Quatsch gemacht habe und dann geht die "ilumicam" in den Druck. :-D


Hier sind noch ein paar Bilder:


Kommentare & Kritik sind wie immer erwünscht!

Grüße, Marcus

P.S.: Noch ein paar theoretische Berechnungen:
Bei der Optik und 30% Überlappung braucht es 18 Aufnahmen horizontal und 12 Reihen = 216 Aufnahmen. Wenn ich das in voller Auflösung aufnehme, käme da ein 1.2Gigapixel Panorama raus... das sollte ja reichen!

[Andree-HB]

...der Nachteil an den gestitchten Panoramen sind natürlich leider die unweigerlichen Bewegungen/Veränderungen in den Einzelbildern (Bäume/Wind, Vögel, Laufbewegungen, usw.), das führt oft zu unerwünschten Effekten im Resultat, die man aber meist ganz gut nachbearbeiten kann.

https://360gigapixels.com/prague_gig...ama_900K_2018/


Lösungen mit zwei Kugelpanoramen (ich habe zum "herumspielen" nur eine einfache Samsung Gear360), die gleichzeitig aufgenommen werden haben dieses Problem nicht, können daher auch Bewegtbildd aufnehmen (360° Videos), haben dafür aber natürlich halt auch eine viel schlechtere Auflösung.

Interessantes Thema, schöne Umsetzung von Dir!


P.S. Ich hatte mir vor Jahren auch mal einen elektrischen Panoramaadapter mit Nodelpunktverschiebung und Schleifringen (zur Kamerasteuerung gebaut)

[LeeMajors]

Richtig, Bewegungen während der langen Aufnahmedauer führen zu Problemen.

Bei mir ist es so, dass ich das primär für Indoor-Fotografie einsetzen möchte. Z.B. Hotels, Immobilien, Kirchen, etc. und zum anderen für Outdoor-HDRIs zur 3D Beleuchtung.
Für Outdoor könnte man ein Programm schreiben, was mehrere Aufnahmen im Abstand von ein paar Sekunden macht - um z.B. laufende Menschen später besser rausretuschieren zu können.

...ich bin selbst gespannt, was hinterher mal rauskommt!

[LeeMajors]

...ist ja so ruhig hier geworden...!?
Das erste Testpanorama ist recht vielversprechend geworden:
https://360.ilumi.de/demo/01/

Grüße, Marcus

[Andree-HB]

Das Ergebnis ist toll geworden - prima !
Hast Du mal ein Photo der (realen) Steuerung ?

[Manf]

Wirklich ein beeindruckendes Bild, tolle Auflösung (und auch eine schön ausgerüstete Werkstatt).
Wenn man eine Ortsbestimmung anhand des Bildes machen wollte, dann villeicht anhand der Karte am Gaszähler.
Das lokale Klima dagegen könnte man über den Verbrauch seit Ende August 2016 nur grob abschätzen.

[LeeMajors]

Das Teil sieht im Grund aus, wie geplant. Das Kläppchen unten hatte Shapeways vergessen zu drucken, das ist heute gekommen, da trocknet noch das 5-min-Epoxy der Neodym Magnete

[Andree-HB]

Werden "nur" automatisiert die Einzelbilder gemacht, oder wird gar über den Pi auch der Stitchingprozess abgewickelt und das fertige Endergebnis ausgespuckt ?

[LeeMajors]

Nein, das Raspi macht nur die Einzelbilder, das Stitching mache ich über PTGui Pro 12.4. Die hochgeladene Demo wurde aus 200 JPGs in 4K Auflösung berechnet. Heute hab ich das ganze mit Belichtungsreihen à 5 Belichtungen gemacht, das sind dann entsprechen 1000 JPGs und 5.5GB Bildmaterial. (Das Raspi würde bei sowas explodieren...) Gerade berechnet der PTGui mir ein HDR in 64K Breite. Das geht sogar mit meinem neuen Rechner mit 32GB sehr langsam...

Das schöne ist, dass die Aufnahmen in genau definierten Winkeln erfolgen. Die Winkel schreib ich zusätzlich in den Dateinamen, dann kommt man mit PTGui schnell zu brauchbaren Ergebnissen, auch wenn mal keine Anhaltspunkte im Bild sind. Man braucht halt nur Zeit. Das Bastelzimmerbild hat die Kamera in 10 Minuten gemacht, für die 1000 Bilder heute Nachmittag hat er 24 Minuten gebraucht.

[LeeMajors]

Noch eine Aufnahme: https://360.ilumi.de/demo/02/

Das Panorama ist 32K breit und besteht aus 200 Belichtungsreihen à 5 Aufnahmen, also 1.000 Aufnahmen im Bereich -3 EV - +3 EV. Die ilumicam hat für die Aufnahme 14 Minuten gebraucht, hinterher wurde alles in PTGui zusammengebaut und in Affinity nachbehandelt. (Den toten Punkt unter der Kamera entfernen, etc.)
Das eigentliche Endergebnis ist ein 32 Bit HDR, 2GB groß, mit dem man auch 3D Szenerien beleuchten kann.


Grüße, Marcus