Vathography verwandelt die Tiefenkarte eines Fotos in ein eigenständiges Kunstwerk
Vathographs: Photographic depth maps as creative expression
Aus einem einzigen Foto leitet ein Diffusion-Transformer die Tiefe der Szene ab – jene technische Zwischenstufe, die sonst nur für Lens-Blur in Photoshop dient. Karim Joseph Nassar erhebt diese Tiefenkarte zum finalen Bild: Fokus wird nicht mehr von der Linse beim Auslösen festgelegt, sondern frei als Zuordnung von Tiefe zu Ton und Farbe gestaltet. Ermöglicht wird das durch Marigold V2, dessen offene Lizenz die Praxis für alle zugänglich macht.
Der Fokus hört auf, eine Eigenschaft des Objektivs zu sein, und wird zu einer Eigenschaft des Bildes, die sich frei über Kontrast oder Farbe gestalten lässt.
- burnoutdv
Okay, ich sehe, worauf das hinausläuft, und ich schätze, als eigenständige Kunst, die ein Foto als Ausgangspunkt nimmt, ist es in Ordnung. Im fotografischen Sinne ist es das nicht, es ist nicht besser als jedes beliebige Smartphone, das Tiefenschärfe halluziniert, wenn das Objektiv mit fester Blende sie nicht hat.
Als jemand, der alle paar Monate bis Jahre einen Fotospaziergang macht, ziehe ich die harte Grenze in dem Moment, in dem es nicht mehr deterministisch ist, und wenn ich das richtig verstehe ... ist es eine Art Machine-Learning-Modell, das die Tiefe durch Hinsehen ableitet. Die Daten sind nicht wirklich da, kurz gesagt, die Tiefe ist halluziniert. Dasselbe, wenn man KI-Füllung verwendet, um Fotos zu retuschieren ... Belichtung ändern, sogar in Zonen, Farben aus RAWs verstärken, alles in Ordnung ... aber in dem Moment, in dem man ein Foto nicht-deterministisch bearbeitet, hört es auf, ein Foto zu sein, und wird zu einem KI-Bild, das zufällig ein Foto als Ausgangspunkt hat.
Alles in allem, zu genau diesem Thema: Gibt es eine Kamera, die Entfernung in irgendeiner sinnvollen Auflösung tatsächlich erfasst? Es gibt lustige ToF-Sensoren und 3D-Voxelwolken von Orten, aber die sind normalerweise nichts, was man in Millisekunden aufnehmen kann.
- hankbond
Ich bin ein großer Fotografie-Fan und fand das eine wirklich raffinierte Nutzung dessen, was normalerweise ein flüchtiges Bild ist, hin zum Kern der Kreation.
- difosfor
Geht das nur mir so oder enthält die Tiefenkarte auch Farbe/Helligkeit? Die gezeigten Vatograph-Bilder scheinen auch hauptsächlich von der Subjekterkennung zu handeln, nicht von der Tiefe. Wie genau sind diese abgeleiteten Tiefenkarten?