รับ MD5 Checksum ของไฟล์ใน Java

ฉันต้องการใช้ Java เพื่อรับ MD5 checksum ของไฟล์ ฉันประหลาดใจจริงๆ แต่ฉันไม่สามารถค้นหาสิ่งใด ๆ ที่แสดงวิธีรับเช็ค MD5 ของไฟล์

เป็นอย่างไรบ้าง?

มีอินพุทมัณฑนากรตกแต่งjava.security.DigestInputStreamเพื่อให้คุณสามารถคำนวณไดเจสต์ขณะที่ใช้สตรีมอินพุทได้ตามปกติแทนที่จะต้องส่งผ่านข้อมูลเพิ่มเติม

MessageDigest md = MessageDigest.getInstance("MD5");
try (InputStream is = Files.newInputStream(Paths.get("file.txt"));
     DigestInputStream dis = new DigestInputStream(is, md)) 
{
  /* Read decorated stream (dis) to EOF as normal... */
}
byte[] digest = md.digest();

ใช้DigestUtilsจากApache Commons Codec library:

try (InputStream is = Files.newInputStream(Paths.get("file.zip"))) {
    String md5 = org.apache.commons.codec.digest.DigestUtils.md5Hex(is);
}

มีตัวอย่างที่Java ของวิธีการใช้MessageDigest ของ Realคลาส

ตรวจสอบหน้าตัวอย่างสำหรับการใช้ CRC32 และ SHA-1 เช่นกัน

import java.io.*;
import java.security.MessageDigest;

public class MD5Checksum {

   public static byte[] createChecksum(String filename) throws Exception {
       InputStream fis =  new FileInputStream(filename);

       byte[] buffer = new byte[1024];
       MessageDigest complete = MessageDigest.getInstance("MD5");
       int numRead;

       do {
           numRead = fis.read(buffer);
           if (numRead > 0) {
               complete.update(buffer, 0, numRead);
           }
       } while (numRead != -1);

       fis.close();
       return complete.digest();
   }

   // see this How-to for a faster way to convert
   // a byte array to a HEX string
   public static String getMD5Checksum(String filename) throws Exception {
       byte[] b = createChecksum(filename);
       String result = "";

       for (int i=0; i < b.length; i++) {
           result += Integer.toString( ( b[i] & 0xff ) + 0x100, 16).substring( 1 );
       }
       return result;
   }

   public static void main(String args[]) {
       try {
           System.out.println(getMD5Checksum("apache-tomcat-5.5.17.exe"));
           // output :
           //  0bb2827c5eacf570b6064e24e0e6653b
           // ref :
           //  http://www.apache.org/dist/
           //          tomcat/tomcat-5/v5.5.17/bin
           //              /apache-tomcat-5.5.17.exe.MD5
           //  0bb2827c5eacf570b6064e24e0e6653b *apache-tomcat-5.5.17.exe
       }
       catch (Exception e) {
           e.printStackTrace();
       }
   }
}

com.google.common.hashข้อเสนอ API:

• API ที่ใช้งานง่ายแบบครบวงจรสำหรับฟังก์ชั่นแฮชทั้งหมด
• การใช้งานบ่น 32 และ 128 บิต seedable ของ
• md5 (), sha1 (), sha256 (), sha512 () อะแดปเตอร์เปลี่ยนเพียงหนึ่งบรรทัดของรหัสเพื่อสลับไปมาระหว่างเหล่านี้และบ่น
• goodFastHash (int bits) สำหรับเมื่อคุณไม่สนใจว่าคุณใช้อัลกอริทึมใด
• ยูทิลิตีทั่วไปสำหรับอินสแตนซ์ HashCode เช่น mixOrdered / รวม unordered

อ่านคู่มือผู้ใช้ ( IO Explained , Hashing Explained )

สำหรับกรณีการใช้งานของคุณFiles.hash()คำนวณและส่งกลับค่าสรุปสำหรับไฟล์

ตัวอย่างเช่น SHA-1 การคำนวณสรุปย่อย (เปลี่ยน SHA-1 เป็น MD5 เพื่อรับสรุปย่อ MD5)

HashCode hc = Files.asByteSource(file).hash(Hashing.sha1());
"SHA-1: " + hc.toString();

สังเกตได้ว่า CRC32 เร็วกว่ามาก md5ดังนั้นใช้ CRC32หากคุณไม่ต้องการเช็คซัมที่ปลอดภัยแบบเข้ารหัส ทราบด้วยว่าmd5 ไม่ควรใช้ในการจัดเก็บรหัสผ่านและสิ่งที่คล้ายกันเนื่องจากเป็นการง่ายต่อการบังคับใช้รหัสผ่าน bcrypt, Scrypt หรือ SHA-256 แทน.

สำหรับการป้องกันในระยะยาวกับแฮช โครงการลายเซ็น Merkleเพิ่มการรักษาความปลอดภัยและการโพสต์ควอนตัมการเข้ารหัสกลุ่มศึกษาได้รับการสนับสนุนโดยคณะกรรมาธิการยุโรปได้ให้คำแนะนำการใช้งานของการเข้ารหัสนี้สำหรับการป้องกันในระยะยาวกับคอมพิวเตอร์ควอนตัม ( โทษ )

สังเกตได้ว่า CRC32 มีอัตราการชนสูงกว่ากลุ่มอื่น

ใช้ nio2 (Java 7+) และไม่มีไลบรารีภายนอก:

byte[] b = Files.readAllBytes(Paths.get("/path/to/file"));
byte[] hash = MessageDigest.getInstance("MD5").digest(b);

หากต้องการเปรียบเทียบผลลัพธ์กับการตรวจสอบที่คาดไว้:

String expected = "2252290BC44BEAD16AA1BF89948472E8";
String actual = DatatypeConverter.printHexBinary(hash);
System.out.println(expected.equalsIgnoreCase(actual) ? "MATCH" : "NO MATCH");

Guava ได้จัดหา API การแฮชใหม่ที่สม่ำเสมอซึ่งใช้งานง่ายกว่า API การแฮชต่างๆที่มีให้ใน JDK ดูHashing อธิบาย สำหรับไฟล์คุณสามารถรับผลรวม MD5, CRC32 (พร้อมรุ่น 14.0+) หรือแฮชอื่น ๆ มากมายได้อย่างง่ายดาย:

HashCode md5 = Files.hash(file, Hashing.md5());
byte[] md5Bytes = md5.asBytes();
String md5Hex = md5.toString();

HashCode crc32 = Files.hash(file, Hashing.crc32());
int crc32Int = crc32.asInt();

// the Checksum API returns a long, but it's padded with 0s for 32-bit CRC
// this is the value you would get if using that API directly
long checksumResult = crc32.padToLong();

ตกลง. ฉันต้องเพิ่ม การใช้งานหนึ่งบรรทัดสำหรับผู้ที่มี Spring และ Apache Commons แล้วหรือกำลังวางแผนที่จะเพิ่ม:

DigestUtils.md5DigestAsHex(FileUtils.readFileToByteArray(file))

สำหรับ Apache และตัวเลือกทั่วไปเท่านั้น (credit @duleshi):

DigestUtils.md5Hex(FileUtils.readFileToByteArray(file))

หวังว่านี่จะช่วยใครซักคน

วิธีการง่ายๆที่ไม่มีไลบรารีของบุคคลที่สามที่ใช้ Java 7

String path = "your complete file path";
MessageDigest md = MessageDigest.getInstance("MD5");
md.update(Files.readAllBytes(Paths.get(path)));
byte[] digest = md.digest();

หากคุณต้องการพิมพ์อาร์เรย์นี้ ใช้ดังต่อไปนี้

System.out.println(Arrays.toString(digest));

หากคุณต้องการสตริง hex จากส่วนย่อยนี้ ใช้ดังต่อไปนี้

String digestInHex = DatatypeConverter.printHexBinary(digest).toUpperCase();
System.out.println(digestInHex);

โดยที่ DatatypeConverter คือ javax.xml.bind.DatatypeConverter

ฉันเพิ่งจะทำเช่นนี้เพียงสตริงแบบไดนามิกMessageDigestสามารถเป็นตัวแทนของแฮชในหลายวิธี ในการรับลายเซ็นของไฟล์อย่างที่คุณจะได้รับด้วยคำสั่งmd5sumฉันต้องทำสิ่งนี้:

try {
   String s = "TEST STRING";
   MessageDigest md5 = MessageDigest.getInstance("MD5");
   md5.update(s.getBytes(),0,s.length());
   String signature = new BigInteger(1,md5.digest()).toString(16);
   System.out.println("Signature: "+signature);

} catch (final NoSuchAlgorithmException e) {
   e.printStackTrace();
}

เห็นได้ชัดว่าไม่ได้ตอบคำถามของคุณเกี่ยวกับวิธีการทำไฟล์โดยเฉพาะคำตอบข้างต้นเกี่ยวข้องกับความเงียบอย่างนั้น ฉันใช้เวลามากมายในการหาผลรวมให้ดูเหมือนแอปพลิเคชันส่วนใหญ่แสดงผลและคิดว่าคุณอาจประสบปัญหาเดียวกัน

public static void main(String[] args) throws Exception {
    MessageDigest md = MessageDigest.getInstance("MD5");
    FileInputStream fis = new FileInputStream("c:\\apache\\cxf.jar");

    byte[] dataBytes = new byte[1024];

    int nread = 0;
    while ((nread = fis.read(dataBytes)) != -1) {
        md.update(dataBytes, 0, nread);
    };
    byte[] mdbytes = md.digest();
    StringBuffer sb = new StringBuffer();
    for (int i = 0; i < mdbytes.length; i++) {
        sb.append(Integer.toString((mdbytes[i] & 0xff) + 0x100, 16).substring(1));
    }
    System.out.println("Digest(in hex format):: " + sb.toString());
}

หรือคุณอาจได้รับข้อมูลเพิ่มเติม http://www.asjava.com/core-java/java-md5-example/

String checksum = DigestUtils.md5Hex(new FileInputStream(filePath));

เราใช้รหัสที่คล้ายกับรหัสด้านบนในโพสต์ก่อนหน้าโดยใช้

...
String signature = new BigInteger(1,md5.digest()).toString(16);
...

อย่างไรก็ตามระวังการใช้BigInteger.toString()ที่นี่เนื่องจากมันจะตัดทอนศูนย์นำหน้า ... (ตัวอย่างเช่นลองs = "27"เช็คซัมควรเป็น"02e74f10e0327ad868d138f2b4fdd6f0" )

ฉันสองข้อเสนอแนะเพื่อใช้ Apache Commons Codec ฉันแทนที่รหัสของเราเองด้วยที่

public static String MD5Hash(String toHash) throws RuntimeException {
   try{
       return String.format("%032x", // produces lower case 32 char wide hexa left-padded with 0
      new BigInteger(1, // handles large POSITIVE numbers 
           MessageDigest.getInstance("MD5").digest(toHash.getBytes())));
   }
   catch (NoSuchAlgorithmException e) {
      // do whatever seems relevant
   }
}

วิธี Java ที่รวดเร็วและสะอาดมากซึ่งไม่ต้องพึ่งพาไลบรารีภายนอก:

(แทนที่ MD5 ด้วย SHA-1, SHA-256, SHA-384 หรือ SHA-512 หากคุณต้องการ)

public String calcMD5() throws Exception{
        byte[] buffer = new byte[8192];
        MessageDigest md = MessageDigest.getInstance("MD5");

        DigestInputStream dis = new DigestInputStream(new FileInputStream(new File("Path to file")), md);
        try {
            while (dis.read(buffer) != -1);
        }finally{
            dis.close();
        }

        byte[] bytes = md.digest();

        // bytesToHex-method
        char[] hexChars = new char[bytes.length * 2];
        for ( int j = 0; j < bytes.length; j++ ) {
            int v = bytes[j] & 0xFF;
            hexChars[j * 2] = hexArray[v >>> 4];
            hexChars[j * 2 + 1] = hexArray[v & 0x0F];
        }

        return new String(hexChars);
}

การใช้งานอื่น: การดำเนินการอย่างรวดเร็วของ MD5 ใน Java

String hash = MD5.asHex(MD5.getHash(new File(filename)));

วิธี Java Environment Environment มาตรฐาน :

public String checksum(File file) {
  try {
    InputStream fin = new FileInputStream(file);
    java.security.MessageDigest md5er =
        MessageDigest.getInstance("MD5");
    byte[] buffer = new byte[1024];
    int read;
    do {
      read = fin.read(buffer);
      if (read > 0)
        md5er.update(buffer, 0, read);
    } while (read != -1);
    fin.close();
    byte[] digest = md5er.digest();
    if (digest == null)
      return null;
    String strDigest = "0x";
    for (int i = 0; i < digest.length; i++) {
      strDigest += Integer.toString((digest[i] & 0xff) 
                + 0x100, 16).substring(1).toUpperCase();
    }
    return strDigest;
  } catch (Exception e) {
    return null;
  }
}

ผลลัพธ์จะเท่ากับยูทิลิตี linux md5sum

นี่คือฟังก์ชั่นง่าย ๆ ที่ล้อมรอบโค้ดของ Sunil เพื่อให้ใช้ไฟล์เป็นพารามิเตอร์ ฟังก์ชั่นนี้ไม่จำเป็นต้องใช้ไลบรารีภายนอก แต่มันต้องการจาวา 7

import java.io.File;
import java.io.IOException;
import java.nio.file.Files;
import java.security.MessageDigest;
import java.security.NoSuchAlgorithmException;

import javax.xml.bind.DatatypeConverter;

public class Checksum {

    /**
     * Generates an MD5 checksum as a String.
     * @param file The file that is being checksummed.
     * @return Hex string of the checksum value.
     * @throws NoSuchAlgorithmException
     * @throws IOException
     */
    public static String generate(File file) throws NoSuchAlgorithmException,IOException {

        MessageDigest messageDigest = MessageDigest.getInstance("MD5");
        messageDigest.update(Files.readAllBytes(file.toPath()));
        byte[] hash = messageDigest.digest();

        return DatatypeConverter.printHexBinary(hash).toUpperCase();
    }

    public static void main(String argv[]) throws NoSuchAlgorithmException, IOException {
        File file = new File("/Users/foo.bar/Documents/file.jar");          
        String hex = Checksum.generate(file);
        System.out.printf("hex=%s\n", hex);            
    }


}

ตัวอย่างผลลัพธ์:

hex=B117DD0C3CBBD009AC4EF65B6D75C97B

หากคุณใช้ ANT เพื่อสร้างสิ่งนี้จะเป็นเรื่องง่าย เพิ่มสิ่งต่อไปนี้ใน build.xml ของคุณ:

<checksum file="${jarFile}" todir="${toDir}"/>

โดยที่ jarFile คือ JAR ที่คุณต้องการสร้าง MD5 จากนั้น toDir เป็นไดเรกทอรีที่คุณต้องการวางไฟล์ MD5

ข้อมูลเพิ่มเติมที่นี่

Google guava ให้ API ใหม่ ค้นหาด้านล่าง:

public static HashCode hash(File file,
            HashFunction hashFunction)
                     throws IOException

Computes the hash code of the file using hashFunction.

Parameters:
    file - the file to read
    hashFunction - the hash function to use to hash the data
Returns:
    the HashCode of all of the bytes in the file
Throws:
    IOException - if an I/O error occurs
Since:
    12.0

นี่คือรูปแบบที่มีประโยชน์ที่ใช้ประโยชน์InputStream.transferTo()จาก Java 9 และOutputStream.nullOutputStream()จาก Java 11 ไม่จำเป็นต้องใช้ไลบรารีภายนอกและไม่จำเป็นต้องโหลดไฟล์ทั้งหมดลงในหน่วยความจำ

public static String hashFile(String algorithm, File f) throws IOException, NoSuchAlgorithmException {
    MessageDigest md = MessageDigest.getInstance(algorithm);

    try(BufferedInputStream in = new BufferedInputStream((new FileInputStream(f)));
        DigestOutputStream out = new DigestOutputStream(OutputStream.nullOutputStream(), md)) {
        in.transferTo(out);
    }

    String fx = "%0" + (md.getDigestLength()*2) + "x";
    return String.format(fx, new BigInteger(1, md.digest()));
}

และ

hashFile("SHA-512", Path.of("src", "test", "resources", "some.txt").toFile());

ผลตอบแทน

"e30fa2784ba15be37833d569280e2163c6f106506dfb9b07dde67a24bfb90da65c661110cf2c5c6f71185754ee5ae3fd83a5465c92f72abd888b03187229da29"

public static String getMd5OfFile(String filePath)
{
    String returnVal = "";
    try 
    {
        InputStream   input   = new FileInputStream(filePath); 
        byte[]        buffer  = new byte[1024];
        MessageDigest md5Hash = MessageDigest.getInstance("MD5");
        int           numRead = 0;
        while (numRead != -1)
        {
            numRead = input.read(buffer);
            if (numRead > 0)
            {
                md5Hash.update(buffer, 0, numRead);
            }
        }
        input.close();

        byte [] md5Bytes = md5Hash.digest();
        for (int i=0; i < md5Bytes.length; i++)
        {
            returnVal += Integer.toString( ( md5Bytes[i] & 0xff ) + 0x100, 16).substring( 1 );
        }
    } 
    catch(Throwable t) {t.printStackTrace();}
    return returnVal.toUpperCase();
}