js 算文件 md5 咋那么慢？还是我写法有问题

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2412 天前的主题，其中的信息可能已经有所发展或是发生改变。

分段计算的

const CryptoJS = require('crypto-js');
/* 分段读取文件 */
function readBinaryChunked(file, chunkCallback, endCallback) {
  const fileSize = file.size;
  const chunkSize = 4 * 1024 * 1024; // 4MB
  let offset = 0;

  const reader = new FileReader();
  reader.onload = () => {
    if (reader.error) {
      endCallback(reader.error || {});
      return;
    }
    offset += reader.result.byteLength;
    try {
      chunkCallback(reader.result, offset, fileSize);
    } catch (err) {
      endCallback(err);
      return;
    }
    if (offset >= fileSize) {
      endCallback(null);
      return;
    }
    readNext();
  };

  reader.onerror = (err) => {
    endCallback(err || {});
  };

  function readNext() {
    const fileSlice = file.slice(offset, offset + chunkSize);
    reader.readAsArrayBuffer(fileSlice);
  }
  readNext();
}


/* 调用 CryptoJS 计算 MD5, cbProgress 用于控制进度条*/
function getMD5(blob, cbProgress) {
  return new Promise((resolve, reject) => {
    const md5 = CryptoJS.algo.MD5.create();
    readChunked(blob, (chunk, offs, total) => {
      md5.update(CryptoJS.lib.WordArray.create(chunk));
      if (cbProgress) {
        cbProgress(offs / total);
      }
    }, (err) => {
      if (err) {
        reject(err);
      } else {
        // const hash = md5.finalize();
        // const hashHex = hash.toString(CryptoJS.enc.Hex);
        // resolve(hashHex);
        const digest = md5.finalize();
        resolve(digest.toString());
      }
    });
  });
}

export { getMD5 };

算一个 200M 的文件居然 10 几秒.....我内网传完这个文件都比算 md5 快慢在 CryptoJS.lib.WordArray.create ？

有没有其他更好的 md5 计算库

3 条回复 • 2018-04-15 13:45:38 +08:00