Forum: PC Hard- und Software Ähnliche Videos finden


von Pauli (Gast)


Lesenswert?

Über's Jahr hat sich hier eine Sammlung verschiedenster Clips 
angesammelt, die endlich mal ausgemistet werden sollten.

Manuell ist das ein zu großer Aufwand (8000 kleine Videos), daher soll 
das eine Software machen. Zum Testen habe ich in einer Win7 VM 
verschiedene Programme getestet.

Im Testordner waren 7 Clips (3x mp4, 3x mkv, 1x webm):
5 haben gleichen Inhalt (sogar gleiche Auflösung) und müßten erkannt 
werden zum Löschen
2 sollten im Idealfall übrig bleiben

Eine Doublette ist sogar nur mp4 statt mkv, dh Video und Audiostream 
sind identisch (mit "ffmpeg -i in.mkv -c copy out.mp4" konvertiert).
Ansonsten sind es zumeist h264/h265/vp9/aac Codecs. Dabei sind bei den 
Doubletten sogar die Längen gleich; also nur verschiedene Codecs.
Soweit möglich wurde die Ähnlichkeitssuche auf 50% gesetzt.

AllDup
- durchsucht angeblich alle 7 Videos mit pHash
- keinerlei Treffer

Anti-Twin
- kein Support für mkv, webm
- keinerlei Treffer

Duplicate Media Finder
- Durchsucht nur 2 Dateien (keine Angabe welche)
- keinerlei Treffer

Duplicate Video Remover
- kein Support für webm
- keine Möglichkeit die Ähnlichkeit zu beeinflussen
- keinerlei Treffer

Duplicate Video Search
- kein Support für webm
- keinerlei Treffer

Fast Duplicate File Finder
- Ähnlichkeitssuche, aber keine Angabe über Dateitypen
- keinerlei Treffer

Mediapurge
- Installation stürzt ab

Similarity
- Installation erfolgreich, stürzt beim Starten aber ab


Von diesen 8 Programmen hat also **kein einziges** auch nur eine einzige 
der Doubletten gefunden, obgleich einige explizit damit werben.

Meine allerletzte Notlösung wäre es, mit ffmpeg von jedem Video einen 
Frame als Bild zu speichern und dann dort Doubletten zu suchen.
Bloß sehe ich so nicht ob beide Videos Audio haben, und (was das Ganze 
recht unzuverlässig macht) schlägt die Erkennung fehl wenn bei einer 
Doublette zB die ersten 3 Sekunden beschnitten wurden.
Vergleich der Länge ist daher auch keine Option.

Nach der Ernüchterung durch diese absolut nutzlosen und erfolglosen 
Programme bin ich offen für Vorschläge.
Am liebsten für Windows, aber Linux geht auch.

von Peter (Gast)


Lesenswert?

Servus,

das wundert mich jetzt doch etwas, auch wenn ich mir grad nicht sicher 
bin dass alle Programme auch zum Auffinden von Video Duplikaten sind.
Wenn gar kein Programm geht sollte man vielleicht mal seinen Test 
überdenken, das kann ja fast nicht sein.

Wie lang (bzw. eher kurz) sind denn die Clip's?
Was sind denn das für Clip's?

Da könnte z.B. schon dein Problem sein weil div. akustische 
Fingerabdruck Verfahren eine Mindestlänge benötigen. (was bei 
Musiktiteln / Musikvideos immer der Fall ist)

Zum Thema Mediapurge:
Der kann Audiodateien und Musikvideos in verschiedenen Formaten wenn der 
externe decoder konfigiert ist.
Was ist denn das für eine Fehlermeldung beim Installieren?
Du hast es aber schon auf einem "richtigen" Windows (Windows7/10) 
betieben und nicht auf Wine unter OSX oder einem alten Windows XP oder 
so was :D  ?

Gruß,
Peter

von Pauli (Gast)


Lesenswert?

Hi,

gewundert hat mich das auch, das kannst Du mir glauben.

Bei den meisten muß ich annehmen daß die Videos handhaben können; 
immerhin geben die unterstützte Containerformate an und teilweise sogar 
Optionen zur Ähnlichkeit.

Die Clips sind recht kurz; für meine Tests waren die zwischen 3 und 12 
Sekunden; mit und ohne Audio. Wie gesagt, gemischt zwischen mkv, mp4 und 
webm mit gängigen Codecs in 1280x720 bzw 1920x1080. Rein optisch war 
eigentlich kein Unterschied zu erkennen. Sowas wie Ausschnittserkennung, 
oder gekürzte Clips habe ich wohlweisslich ganz weggelassen.

Den Fehler von Mediapurge weiß ich ganz ehrlich garnicht mehr; da war 
ich schon so gefrustet von den anderen Programmen.

Getestet unter Win7; allerdings in einer VM weil die Programme weiß der 
Teufel was für "Extras" mitinstallieren, aber das dürfte da ja nichts 
ausmachen.

Ich habe auch schon überlegt ob die vielleicht vorraussetzten daß 
irgendwelche obskuren Codecpacks bereits installiert sind. Aber Hinweise 
dazu gab es in keinem Programm, und gute Software liefert das ja mit; 
MPC-HC und VLC spielen die Clips problemlos ohne daß ich irgendein Pack 
installieren mußte.

von Peter (Gast)


Lesenswert?

Die sind schon verflucht kurz, da kannst du evtl. immer an der 
Mindestlänge scheitern.

Ich kann dir das jetzt nur für Mediapurge sagen,
da es zum Auffinden von doppelten Musiktiteln gedacht ist (was auch bei 
MusikVideos funktioniert) kommt es mit diesen kurzen Clips nicht klar.

Btw:
"Soweit möglich wurde die Ähnlichkeitssuche auf 50% gesetzt"
ich hätt beim Test den jeweiligen Programmdefault belassen da du ja die 
Algorithmen nicht kennst. Das hätte aber dann eher du Fehlerkennung 
geführt...

Bitte melde dich an um einen Beitrag zu schreiben. Anmeldung ist kostenlos und dauert nur eine Minute.
Bestehender Account
Schon ein Account bei Google/GoogleMail? Keine Anmeldung erforderlich!
Mit Google-Account einloggen
Noch kein Account? Hier anmelden.