Starnberg, im Juli 2011 - Grundlagen zur Daten-DeDuplizierung - Eine kurze Übersicht... 

Zum Hintergrund: Mit Daten-DeDuplizierung oder abgekürzt "DeDupe" bezeichnet man verschiedene Verfahren, um möglichst hochautomatisiert redundante Files, Bytes oder Datenblöcke zu entfernen. Die eliminierten Daten werden durch Pointer ersetzt. Ziel ist es, die Menge zu speichernder Daten entweder bereits an der Quelle (Source) oder am Ziel (Target) zu reduzieren. Das hierzu nötige Repository (Index) zur Identifikation von „unique Data“ liefert im Zusammenspiel mit der eigentlichen DeDuplizierung-Engine (Software, Algorithmen) die Grundlage zur Implementierung von DeDupe-Lösungen. Es kommen in der Regel sog. Pattern-Matching- (Delta Based - Suchmuster) oder hashbasierte Techniken zur Anwendung...

Mehr hierzu in der PDF-Übersicht (Stand Sept. 11), die Sie hier nachfolgend herunterladen können...