มีเครื่องมือที่รวม zcat และ cat อย่างโปร่งใสหรือไม่?

เมื่อจัดการกับไฟล์บันทึกบางไฟล์จะลงท้ายด้วยไฟล์ gzipped ต้องขอบคุณlogrotateและบางไฟล์ไม่ใช่ ดังนั้นเมื่อคุณลองทำสิ่งนี้:

$ zcat *

คุณท้ายด้วยบรรทัดคำสั่งเช่นzcat xyz.log xyz.log.1 xyz.log.2.gz xyz.log.3.gzแล้วด้วย:

gzip: xyz.log: not in gzip format

มีเครื่องมือที่จะใช้เวทย์มนตร์ไบต์คล้ายกับวิธีการfileทำงานและใช้zcatหรือcatขึ้นอยู่กับผลลัพธ์เพื่อให้ฉันสามารถท่อส่งออกไปgrepเป็นตัวอย่าง?

NB: ฉันรู้ว่าฉันสามารถเขียนสคริปต์ได้ แต่ฉันกำลังถามว่ามีเครื่องมือที่มีอยู่แล้ว

zless

ดูเหมือนน่าเสียดายzcatที่ libz มี API ที่รองรับการอ่านจากไฟล์ที่ถูกบีบอัดและไม่มีการบีบอัดอย่างโปร่งใส แต่ manpage ไม่บอกว่าจะเทียบเท่ากับzcatgunzip -c

ลองด้วย-fหรือ--force:

zcat -f -- *

เนื่องจากzcatเป็นเพียงสคริปต์ง่ายๆที่ทำงาน

exec gzip -cd "$@"

ด้วยตัวเลือกยาว ๆ ที่จะแปล

exec gzip --stdout --decompress "$@"

และตามman gzip(เน้นของฉัน):

-f - แรง
      บังคับการบีบอัดหรือคลายการบีบอัดแม้ว่าไฟล์นั้นจะมีหลายลิงค์
      หรือไฟล์ที่เกี่ยวข้องนั้นมีอยู่แล้วหรือถ้าข้อมูลที่บีบอัดอยู่
      อ่านหรือเขียนลงในเทอร์มินัล หากข้อมูลอินพุตไม่อยู่ในรูปแบบ
      ยอมรับโดย gzip และหากได้รับตัวเลือก --stdout ก็ให้คัดลอก
      ป้อนข้อมูลโดยไม่มีการเปลี่ยนแปลงมาตรฐานการส่งออก: ให้ zcat ประพฤติตัวเป็นแมว

นอกจากนี้:

เพื่อให้ฉันสามารถไพพ์เอาท์พุทgrepเป็นตัวอย่าง

คุณสามารถใช้zgrepสำหรับ:

zgrep -- PATTERN *

แต่เห็นความคิดเห็นของStéphaneด้านล่าง

ฉันใช้เพื่อจุดประสงค์เดียวกันทุกประการ:

{ cat /var/log/messages ; zcat /var/log/messages*.gz ; }| grep something | grep "something else" ....

มีการแทนที่แบบหล่นในสำหรับ ztools (zcat, zgrep, .. ) ที่เรียกว่า zutils ซึ่งรวมเครื่องมือคลายการบีบอัดทั้งหมดโดยไม่ขึ้นกับแบ็กเอนด์ ดังนั้นด้วยคำสั่งเดียวกันคุณสามารถอ่านไฟล์ธรรมดา, lzma, gzipped, xz ได้อย่างโปร่งใส

มันมีอยู่ใน debian wheezy หรือใหม่กว่าอาจเป็น redhat / centos เกินไป

หน้าของโครงการอยู่ที่นี่nongnu.org

โพสต์บล็อกอธิบายการใช้งานของ util ที่นี่ ( noone.org )

ใช้งานได้ดีใน RHEL 5.x โดยที่ zcat เป็นไบนารี มันล้มเหลวใน RHEL 6.x (และ Ubuntu 12.x) โดยที่ zcat เป็นสคริปต์ สิ่งนี้เคยทำงานได้ดี

ฉันจะไม่ใช้ zcat เลย แต่ zgrep จะไม่จัดการไฟล์ที่ไม่มีการบีบอัดอย่างเหมาะสม

เปิดทั้งการบีบอัดและไม่บีบอัดตามลำดับเวลา

ls -v syslog* | tac | xargs zcat -f | less

แล้วเสื้อคลุมล่ะ?

$ cat xcat.sh 
#!/bin/bash

for i in $@;do 
        [ ! -z "$(file -i $i | grep "gzip")" ] && zcat $i || cat $i
done

$ bash xcat.sh plain.txt gzipped_text.gz

คัดลอกและวาง (หรือวางไว้ที่ท้าย~/.bashrcไฟล์ของคุณ) ฟังก์ชันbashนี้:

logs() { zcat -f $(ls -rv "$1"*) | less; }

ตอนนี้คุณสามารถพิมพ์ตัวอย่างlogs /var/log/syslogหรือlogs /var/log/nginx/access.logเพื่อดูทั้งหมดsyslogหรือNginxบันทึกข้อความจากเก่าไปใหม่ล่าสุดที่มีน้อย

จากนั้นคุณสามารถค้นหาสิ่งที่พิมพ์/somethingและกดปุ่มnสำหรับการต่อไป

มีสคริปต์ Perl ที่สวยงาม exacly ทำเช่นนี้ มันคือ logresolvemerge.pl จากโครงการ awstats: http://www.awstats.org/docs/awstats_tools.html

Logresolvemerge ช่วยให้คุณได้รับไฟล์บันทึกผลลัพธ์หนึ่งไฟล์เรียงลำดับตามวันที่สร้างจากแหล่งข้อมูลเฉพาะ:

สร้างคำตอบของ @ Ryan ต่อไปนี้จะได้รับไฟล์ 'roll' ทั้งหมดเรียงตามลำดับตัวอักษรจากนั้นรับไฟล์ปัจจุบันยกเลิกการบีบอัดไฟล์หากจำเป็นและlessพวกเขา:

cat <(ls mylog.log-* | sort) <(ls mylog.log) | xargs zcat -f | less

หรือถ้าคุณต้องการให้พวกเขาทั้งหมดเป็นกระแสข้อมูลต่อเนื่องคุณสามารถทำได้tailและเลือกที่จะส่งไปยังกระบวนการอื่น

cat <(ls mylog.log-* | sort | xargs zcat -f) <(tail -f -n +0 mylog.log)

ฉันควรทราบว่าสิ่งนี้ได้รับการออกแบบสำหรับบันทึกที่มีการหมุนเวียนรายวันโดยมีวันที่ต่อท้ายไฟล์ หากบันทึกของคุณในรูปแบบอื่นคุณจะต้องแก้ไขส่วนแรกของcatคำชี้แจงเพื่อรองรับ