I actually read a recent article on planet erlang about locating duplicate files<br>that has some information that might help<br><br><a href="http://planeterlang.org/story.php?title=Writing_a_duplicate_file_finder_in_Erlang">
http://planeterlang.org/story.php?title=Writing_a_duplicate_file_finder_in_Erlang</a><br><br><div><span class="gmail_quote">On 25/10/2007, <b class="gmail_sendername">Linan Wang</b> <<a href="mailto:tali.wang@gmail.com">
tali.wang@gmail.com</a>> wrote:</span><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">Interesting problem.<br>It appears to me like a svn/cvs/git related problem. I think the core
<br>is to merge indices. Have a look at git, in my memory it has such kind<br>of function.<br>Hopefully Time Machine will solve this kind of problems.<br><br>On 25/10/2007, Joe Armstrong <<a href="mailto:erlang@gmail.com">
erlang@gmail.com</a>> wrote:<br>> I have an interesting? problem.<br>><br>> Over the last ? years (> 10) I have been upgrading my home system<br>> this usually involved buying a bigger disk and copying most (or all)
<br>> of the files<br>> from the old disk to the new disk or disks.<br>><br>> I've also been backing up the family photos etc on USB disks.<br>><br>> Now I have > 1 Tera bytes of files spread over c. 10 computers and
<br>> 3 pluggable USB disks. Having made a "backup" both the original and the<br>> copy live lives of their own.<br>><br>> Does anybody know of a good algorithm to consolidate/merge all this<br>> data or do I have
<br>> to write my own? One immediate thought is to compute the MD5 sums of<br>> all files on all<br>> disk and thus find all duplicates - then create a master copy of all<br>> unique files<br>> but the file names will be wrong and this might result in a big mess.
<br>><br>> This cannot be an uncommon problem - any ideas how to solve it?<br>><br>> /Joe<br>> _______________________________________________<br>> erlang-questions mailing list<br>> <a href="mailto:erlang-questions@erlang.org">
erlang-questions@erlang.org</a><br>> <a href="http://www.erlang.org/mailman/listinfo/erlang-questions">http://www.erlang.org/mailman/listinfo/erlang-questions</a><br>><br><br><br>--<br>Best regards<br><br>Linan Wang
<br>_______________________________________________<br>erlang-questions mailing list<br><a href="mailto:erlang-questions@erlang.org">erlang-questions@erlang.org</a><br><a href="http://www.erlang.org/mailman/listinfo/erlang-questions">
http://www.erlang.org/mailman/listinfo/erlang-questions</a><br></blockquote></div><br><br clear="all"><br>-- <br><a href="http://arandomurl.com/">http://arandomurl.com/</a><br><a href="http://www.flickr.com/photos/daleharvey/">
http://www.flickr.com/photos/daleharvey/</a>