News-Kommentare Forum



Neuronale Netze zur Bildergänzung



Kommentare / Diskussionen zu aktuellen Newsmeldungen auf slashCAM
Antworten
slashCAM
Administrator
Administrator
Beiträge: 11262

Neuronale Netze zur Bildergänzung

Beitrag von slashCAM »

Und schon wieder einmal ein höchst interessantes Paper aus dem Bereich der künstlichen Intelligenz, an dem unter anderem auch das Adobe Research Team beteiligt war. Wer P...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Neuronale Netze zur Bildergänzung



camworks
Beiträge: 1902

Re: Neuronale Netze zur Bildergänzung

Beitrag von camworks »

Bei PatchMatch sind die Augen besser, die weißen Streifen sind korrekt eingefügt.
ciao, Arndt.



StanleyK2
Beiträge: 1105

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das Problem bei solchen Verdeckungsmethoden ist weniger, wie gut es Verdeckt wird, als vielmehr das Weglassen der Realität, denn wenn der Leopard unter dem Weißen Fleck das Einschussloch hat, das ihn getötet hat, wird die Bildaussahe völlig verkehrt und das Foto oder der Film erfüllt nicht mehr den eigentlichen Ansatz.

All diese Methoden sind nämlich nur so gut, wie die optische Wiedergabe und können diese nicht ersetzen. Es entstehen wohl messerscharfe Bilder, aber mit jedem Patch eine zunehmende Entfernung zur Realität.
Interessant wäre wirklich einmal, das Originalbild gewesen und hätte das eigentliche Problem verdeutlichen können.

Aber es geht ja offenbar gar nicht um die Rekonstruktion von realen Wirklichkeiten, also dem eigentlichen Sinn der Fotografie, sondern darum, einer neuen Bildästetik zu dienen, bei der die reale Szene nur noch eine nachgeordnete Rolle spielt.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



StanleyK2
Beiträge: 1105

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Neue Ästhetik? Im vorliegenden Beispiel wohl kaum. Das ist einfach nur Käse und ist weder ästhetisch noch realistisch. Die Nasenpartie fehlt völlig, und die ist für ein (Groß)Katzengesicht essentiell:



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das war auch weniger auf diese Flickschusterei gemünzt, als vielmehr auf die Super Resolution Aufbereitung, denn auch da ist das, was das Objektiv nicht aufzeichnet, einfach nur mit Patches übertüncht und keine Wiedergabe der Realität mehr.
Die Google Algorithmen zaubern an Strände sogar Menschen, die man in der Vergrösserung dann erahnen kann, obwohl in der Aufnahmeszene gar keine Menschen an dem Strand waren.
Es wird dann eine Frage, was von wem in solche Patch Bibliotheken eingepflegt wird, aber mit Fotografie hat das dann nur noch begrenzt zu tun.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



legolax
Beiträge: 15

Re: Neuronale Netze zur Bildergänzung

Beitrag von legolax »

StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego



Rudolf Max
Beiträge: 852

Re: Neuronale Netze zur Bildergänzung

Beitrag von Rudolf Max »

Die Idee an sich ist ja sicher nicht schlecht...

Mag ja für ein Stück blauen Himmel oder solche Sachen sehr hilfreich sein, aber für so komplexe Sachen wie ein grosses Katzengesicht ist es völlig unbrauchbar...

Ich warte mal solange, bis man mit dieser pseudo künstlichen Intelligenz ganze Filme automatisch drehen kann, dann muss ich nicht extra noch selber etwas drehen...

Im Moment ist es mehr künstlich als intelligent...



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

legolax hat geschrieben:
StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego
Leider ist das nicht die einzige Anwendung .... Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys und rechnen die Bilder.
Hauptsache scharf und Inhalt reicht so ungefähr.

Insofern hat man das leider nicht mehr in der Hand, welche Stellen. des Bildes gepatched werden, weil es dann auch ausreicht, nur noch mit geringer Auflösung abzutasten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 21809

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Tolle Handys, die 30x pro Sekunde neuronalnetzgespeiste Fakebilder hinkriegen, ohne dass man's sieht. Du kannst deine Story sicher belegen, nicht wahr?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Klar, nur dazu gehört aber auch jemand, der es versteht.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 21809

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Billige Ausflucht mit üblicher Beleidigung. wowu pur. Gilt aber nicht: Links bitte! Mach mal. Oder ist die Story alleine auf deinem Mist gewachsen? So wie die angebliche Super Resolution 4K-Aufnahmen von hinten bis vorne scharf rechnet? Schon das ist einfach zu widerlegen, man muss dazu nur eine anschalten, was du wohl noch nie getan hast. Jetzt also neuronale Netze beim Handyfilmen. Komm, beleg mal.



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Ja ja, alles klar, leg Dich wieder hin.

Aber ich hab´hier was auf Deinem Level gefunden.

Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 299

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Aber ich dachte, Magic Pony macht da im Moment noch eher Forschungsarbeit, und dann auch eher für die Nachbereitung, deren Technologie wird tatsächlich aktuell in Handys verbaut?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Probier es aus, denn wenn Du 4K auflöst, müsstest Du einen Gegenstand von 2x2 cm im Abstamd von rd 100 m gefilmt, in der 4K Wiedergabe noch als einzelnes Objekt erkennen.
Übrigens wird an dem Thema schon seit den 70er Jahren geforscht und im Bildzusammemhang rd. 10 Jahre.
Und im Gamingbereich sind Echtzeitapplikationen mittlerweile ein alter Hut und mit z.Tl. deutlich höheren Auflösungen.
Aber das ist ja ein allgemeines Entwicklungsthema, an dem alle möglichen Firmen, jeweils in ihren Bereichen arbeiten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 299

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Meine Frage bezog sich eher auf Magic Pony, weißt du, ob deren Technologie schon konkret verbaut wird?



Jott
Beiträge: 21809

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys



Jommnn
Beiträge: 299

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Jott hat geschrieben:In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys
Ja eben, das hat mich jetzt verwirrt, Magic Pony in Zusammenhang mit Hardware zu lesen, dann war Wowus Link einfach irreführend.



 Aktuelle Beiträge [alle Foren]
 
» NAB 2024 Neuigkeiten
von Darth Schneider - Do 5:48
» Linsen (Vintage, Anamorphic & Co.)
von Skeptiker - Do 0:10
» Was schaust Du gerade?
von klusterdegenerierung - Mi 23:44
» Blackmagic PYXIS 6K: Die Vollformat „Box“-Kamera mit Viewfinder, 2x SDI, Sideplates (!) uvm.
von roki100 - Mi 23:15
» Was hörst Du gerade?
von klusterdegenerierung - Mi 23:14
» Tieraufnahmen mit dem MKE600 + H1 Essential rauschen
von Skeptiker - Mi 23:06
» Messevideo: Atomos NINJA PHONE erklärt
von rob - Mi 22:39
» Was hast Du zuletzt gekauft?
von Jörg - Mi 22:08
» Blackmagic Box Camera
von roki100 - Mi 20:31
» Western Digital Ultrastar Transporter: 368 TB in der Aktentasche
von medienonkel - Mi 19:44
» GPS Receiver GP-E2 Standort anzeigen
von Reinhold888 - Mi 17:32
» Western Digital stellt weltweit erste 4 TB SD-Karte vor
von Walter Schulz - Mi 16:43
» Insta360 X4 360°-Action-Kamera filmt in 8K
von Achim KCW - Mi 16:13
» Blackmagic URSA Cine 12K - 16 Blendenstufen für 15.000 Dollar!
von Frank Glencairn - Mi 15:33
» Netflix „Ripley“
von TomStg - Mi 13:17
» Adobe entfernt negativ promts
von klusterdegenerierung - Mi 12:09
» Tragischer Unfall am Set trotz Filmwaffe: Kamerafrau stirbt nach Schuß von Alec Baldwin
von 7River - Mi 11:23
» Dehancer Pro - Filmsimulation auf höchstem Niveau
von Frank Glencairn - Mi 10:19
» Blackmagic DaVinci Resolve 19 jetzt auch auf Deutsch
von medienonkel - Mi 9:58
» DJI Avata 2, Goggles 3 und RC Motion 3 im ersten Praxistest
von Videopower - Di 23:35
» RED ist nun eine Nikon-Tochter - und Jarred Land abgesetzt
von iasi - Di 23:24
» ASUS ProArt PA32KCX - 8K Mini-LED-Monitor mit DisplayPort 2.1
von MK - Di 20:22
» Blackmagic stellt neues DaVinci Resolve Micro Color Panel für 495 Dollar vor
von patfish - Di 19:57
» Neues Blackmagic DaVinci Resolve 19 bringt über 100 neue Funktionen
von MK - Di 19:23
» Videointerview: Die neue Blackmagic PIXIS 6K Box Kamera erklärt
von iasi - Di 18:42
» Adobe Firefly für Premiere Pro - Generative Extend, Object removal/addition
von klusterdegenerierung - Di 16:47
» Welches Highclass Smartphone für gute BTS-Video?
von Frank Glencairn - Di 16:09
» !Großes Serien update bei Samyang!
von Bildlauf - Di 15:54
» Videointerview: Adobe Premiere Pro - die neuen KI Funktionen erklärt
von slashCAM - Di 15:42
» ARRI zeigt Multicam-System ALEXA 35 Live
von slashCAM - Di 14:45
» Neues Ärzte-Musikvideo schafft durchgehende Konsistenz mittels KI-Stil
von februarfinal8 - Di 14:31
» Blackmagic senkt Preise für alle Video Assist 3G- und 12G-Monitor-Recorder
von roki100 - Di 12:49
» Apple Vision Pro: Verkaufsstart (USA) ab Februar für 3.499,- Dollar + neuer Werbeclip
von NurlLeser - Di 9:36
» ZOOM F6 - 32 Bit Audio Recorder
von berlin123 - Mo 21:50
» Die URSA Cine 17K soll mit 50mm breitem Sensor kommen
von iasi - Mo 21:13