为文件夹创建哈希

Question

我需要为包含一些文件的文件夹创建哈希。我已经为每个文件完成了这项任务，但我正在寻找为文件夹中的所有文件创建一个散列的方式。任何想法如何做到这一点？

（当然我可以为每个文件哈希，并将其拼接到一些大的哈希，但它不是一种方法，我喜欢）

在此先感谢。

Answer 1

将文件名和文件内容连接在一个大字符串中并对其进行散列，或者对块进行散列以获得性能。

当然，你需要考虑几件事情考虑：

• 你需要按名称排序文件，这样你就不会得到两个不同的哈希值的情况下，为了文件的变化。
• 使用此方法只考虑文件名和内容。如果文件名不算，你可以先按内容排序，然后再按散列，如果更多属性（ctime/mtime/hidden/archived ..）很重要，请将它们包含在待处理的字符串中。

Answer 2

如果你已经有了所有文件的散列，只需按字母顺序对散列进行排序，连接它们并再次散列它们以创建一个超级散列。

Answer 3

创建文件tarball，散列tarball。

> tar cf hashes *.abc 
> md5sum hashes

或散列单个文件和管道输出到哈希命令。

> md5sum *.abc | md5sum

编辑：这两种方法上面没有文件进行排序，以便可以返回不同的哈希每次调用，这取决于外壳是如何扩展星号。

Answer 4

这散列所有文件（相对）路径和内容，并正确处理文件排序。

它很快 - 就像一个4MB目录30毫秒。

using System; 
using System.Text; 
using System.Security.Cryptography; 
using System.IO; 
using System.Linq; 

... 

public static string CreateMd5ForFolder(string path) 
{ 
    // assuming you want to include nested folders 
    var files = Directory.GetFiles(path, "*.*", SearchOption.AllDirectories) 
         .OrderBy(p => p).ToList(); 

    MD5 md5 = MD5.Create(); 

    for(int i = 0; i < files.Count; i++) 
    { 
     string file = files[i]; 

     // hash path 
     string relativePath = file.Substring(path.Length + 1); 
     byte[] pathBytes = Encoding.UTF8.GetBytes(relativePath.ToLower()); 
     md5.TransformBlock(pathBytes, 0, pathBytes.Length, pathBytes, 0); 

     // hash contents 
     byte[] contentBytes = File.ReadAllBytes(file); 
     if (i == files.Count - 1) 
      md5.TransformFinalBlock(contentBytes, 0, contentBytes.Length); 
     else 
      md5.TransformBlock(contentBytes, 0, contentBytes.Length, contentBytes, 0); 
    } 

    return BitConverter.ToString(md5.Hash).Replace("-", "").ToLower(); 
} 

Answer 5

Dunc的答案效果很好;但是，它不处理空目录。下面的代码为空目录返回MD5'd41d8cd98f00b204e9800998ecf8427e'（0长度字符流的MD5）。

public static string CreateDirectoryMd5(string srcPath) 
{ 
    var filePaths = Directory.GetFiles(srcPath, "*", SearchOption.AllDirectories).OrderBy(p => p).ToArray(); 

    using (var md5 = MD5.Create()) 
    { 
     foreach (var filePath in filePaths) 
     { 
      // hash path 
      byte[] pathBytes = Encoding.UTF8.GetBytes(filePath); 
      md5.TransformBlock(pathBytes, 0, pathBytes.Length, pathBytes, 0); 

      // hash contents 
      byte[] contentBytes = File.ReadAllBytes(filePath); 

      md5.TransformBlock(contentBytes, 0, contentBytes.Length, contentBytes, 0); 
     } 

     //Handles empty filePaths case 
     md5.TransformFinalBlock(new byte[0], 0, 0); 

     return BitConverter.ToString(md5.Hash).Replace("-", "").ToLower(); 
    } 
}