ลบข้อความซ้ำออกจาก Maildir

ฉันได้รับข้อความซ้ำจำนวนมากใน Maildir ของเซิร์ฟเวอร์ IMAP ของฉัน วิธีที่ดีที่สุดในการลบออกคืออะไร

บางประเด็นที่เกี่ยวข้อง:

• รหัสข้อความที่ใช้ร่วมกันมักจะเป็นคำจำกัดความที่ดีพอ สคริปต์ขนาดเล็กที่ลบทั้งหมด แต่ข้อความที่ซ้ำกันจะทำงาน
• บางครั้งมีความจำเป็นต้องค้นหาข้อมูลซ้ำตามเนื้อหาของข้อความที่แชร์ คำจำกัดความที่สมเหตุสมผลของการแบ่งปันที่นี่คืออะไร เทียบเท่าระดับบิต สิ่งที่เกี่ยวกับความแตกต่างที่แปลกประหลาดในการตัดบรรทัดการหลบหนีการเข้ารหัสอักขระ?
• บางครั้งมีความแตกต่างที่มีความหมายระหว่างข้อความ 'ซ้ำ' วิธีที่ดีที่สุดในการตรวจสอบความแตกต่างในชุดของข้อความ 'ซ้ำ' คืออะไร diffs?

ฉันได้ทำการปรับปรุงที่สำคัญบางอย่างสำหรับสคริปต์ของเควินที่กล่าวถึงข้างต้นและเขาก็ใจดีพอที่จะยอมรับคำขอดึงของฉัน ในที่สุดเราก็แยกออกเป็นโครงการเฉพาะที่คุณสามารถหาได้ที่นี่:

https://github.com/kdeldycke/maildir-deduplicate

สำหรับไฟล์ทั่วไปใน linux ฉันใช้ fdupes utils เพื่อลบไฟล์ที่ซ้ำกัน ฉันพบว่าใช้งานได้กับข้อความ Maildir

Evolution ของ Gnome [ตัวแทนผู้ใช้แบบกราฟิกเมล์] มีคุณสมบัติในตัวเพื่อลบเมลที่ซ้ำกัน ตามที่อธิบายไว้ในหน้าความช่วยเหลือนี้มันจะลดลงไปที่

1. เลือกข้อความต้องสงสัย (หรือเฉพาะข้อความทั้งหมด)
2. ไปที่เมนูข้อความที่เลือกลบข้อความที่ซ้ำกัน

voila

PS Evolution สามารถเข้าถึงข้อความของคุณในพื้นที่ (MailDir, MH, Mbox) หรือผ่าน IMAP

ที่ดีที่สุดที่ฉันได้พบในวันนี้คือเควิน Deldycke ของMaildir-deduplicate

• มันจะละเว้นX-MIMETrackส่วนหัวโดยค่าเริ่มต้นและเปรียบเทียบส่วนหัวโดยใช้ส่วนSHA224ย่อย
• มันจะลบรายการที่ซ้ำกันโดยอัตโนมัติโดยไม่ต้องขอการยืนยัน อย่างไรก็ตามมีโหมดเรียกใช้แบบแห้งซึ่งอนุญาตให้แสดงตัวอย่างภาพที่ซ้ำกันจะถูกลบ

ฉันเดิมพันใครจะทำอะไรบางอย่างแฟนซีจาก Rick แซนเดอdelIMAPdups.pl , ส่วนหนึ่งของเครื่องมือ IMAP