วิธีลบบรรทัดใหม่หลายรายการที่ EOF

ฉันมีไฟล์ที่ลงท้ายด้วยการขึ้นบรรทัดใหม่อย่างน้อยหนึ่งบรรทัดและควรลงท้ายด้วยการขึ้นบรรทัดใหม่เพียงครั้งเดียว ฉันจะทำสิ่งนั้นด้วยเครื่องมือ Bash / Unix / GNU ได้อย่างไร

ตัวอย่างไฟล์ที่ไม่ดี:

1\n
\n
2\n
\n
\n
3\n
\n
\n
\n

ตัวอย่างไฟล์ที่แก้ไข:

1\n
\n
2\n
\n
\n
3\n

กล่าวอีกนัยหนึ่ง: ควรมีการขึ้นบรรทัดใหม่หนึ่งบรรทัดระหว่าง EOF และอักขระที่ไม่ใช่บรรทัดใหม่ล่าสุดของไฟล์

การดำเนินการอ้างอิง

อ่านเนื้อหาไฟล์ตัดบรรทัดใหม่หนึ่งบรรทัดจนไม่มีบรรทัดใหม่อีกสองบรรทัดในตอนท้ายเขียนมันกลับมา:

#! /bin/python

import sys

with open(sys.argv[1]) as infile:
    lines = infile.read()

while lines.endswith("\n\n"):
    lines = lines[:-1]

with open(sys.argv[2], 'w') as outfile:
    for line in lines:
        outfile.write(line)

การชี้แจง: แน่นอนว่าการอนุญาตให้ใช้ท่อหากทำได้ดีกว่า

awk '/^$/ {nlstack=nlstack "\n";next;} {printf "%s",nlstack; nlstack=""; print;}' file

จากประโยชน์สคริปต์หนึ่งบรรทัดสำหรับ sed

# Delete all trailing blank lines at end of file (only).
sed -e :a -e '/^\n*$/{$d;N;};/\n$/ba' file

เนื่องจากคุณมีคำตอบอยู่แล้วกับเครื่องมือที่เหมาะสมกว่าคือ sed และ awk; คุณสามารถใช้ประโยชน์จากความจริงที่ดึง$(< file)แถบว่างเปล่าต่อท้าย

a=$(<file); printf '%s\n' "$a" > file

การแฮ็กราคาถูกนั้นจะไม่ทำงานเพื่อลบบรรทัดว่างต่อท้ายซึ่งอาจมีช่องว่างหรืออักขระที่ไม่พิมพ์อื่น ๆ เพียงเพื่อลบบรรทัดว่างต่อท้าย มันจะไม่ทำงานหากไฟล์นั้นมีค่าเป็น null

ในเปลือกหอยอื่น ๆ นอกเหนือจากการทุบตีและ zsh ใช้แทน$(cat file)$(<file)

คุณสามารถใช้เคล็ดลับนี้กับcat& printf:

$ printf '%s\n' "`cat file`"

ตัวอย่างเช่น

$ printf '%s\n' "`cat ifile`" > ofile
$ cat -e ofile
1$
$
2$
$
$
3$

$หมายถึงจุดสิ้นสุดของบรรทัด

อ้างอิง

• การลบบรรทัดว่างต่อท้าย

คำถามนี้ถูกแท็กด้วยedแต่ไม่มีใครเสนอedวิธีแก้ปัญหา

นี่คือหนึ่ง:

ed -s file <<'ED_END'
a

.
?^..*?+1,.d
w
ED_END

หรือเทียบเท่า

printf '%s\n' a '' . '?^..*?+1,.d' w | ed -s file

ed จะวางคุณที่บรรทัดสุดท้ายของบัฟเฟอร์การแก้ไขโดยค่าเริ่มต้นเมื่อเริ่มต้น

คำสั่งแรก ( a) เพิ่มบรรทัดว่างที่ท้ายของบัฟเฟอร์ (บรรทัดว่างในสคริปต์การแก้ไขคือบรรทัดนี้และ dot ( .) เป็นเพียงสำหรับการกลับมาที่โหมดคำสั่ง)

คำสั่งที่สอง ( ?) ค้นหาบรรทัดก่อนหน้าที่ใกล้ที่สุดที่มีบางสิ่ง (แม้กระทั่งอักขระช่องว่างสีขาว) จากนั้นลบทุกอย่างจนสุดบัฟเฟอร์จากบรรทัดถัดไป

คำสั่งที่สาม ( w) เขียนไฟล์กลับไปที่ดิสก์

บรรทัดว่างที่เพิ่มเข้ามาจะช่วยป้องกันส่วนที่เหลือของไฟล์จากการถูกลบในกรณีที่ไม่มีบรรทัดว่างที่ท้ายไฟล์ต้นฉบับ

ต่อไปนี้เป็นโซลูชัน Perl ที่ไม่ต้องการการอ่านมากกว่าหนึ่งบรรทัดในหน่วยความจำในแต่ละครั้ง:

my $n = 0;
while (<>) {
    if (/./) {
        print "\n" x $n, $_;
        $n = 0;
    } else {
        $n++;
    }
}

หรือเป็นหนึ่งซับ:

perl -ne 'if (/./) { print "\n" x $n, $_; $n = 0 } else { $n++ }'

สิ่งนี้จะอ่านไฟล์ทีละบรรทัดและตรวจสอบแต่ละบรรทัดเพื่อดูว่ามีอักขระที่ไม่ใช่บรรทัดใหม่หรือไม่ หากไม่เป็นเช่นนั้นจะเป็นการเพิ่มเคาน์เตอร์ ถ้าเป็นเช่นนั้นมันจะพิมพ์จำนวนบรรทัดใหม่ที่ระบุโดยตัวนับตามด้วยตัวบรรทัดเองแล้วรีเซ็ตตัวนับ

ในทางเทคนิคการบัฟเฟอร์แม้แต่บรรทัดเดียวในหน่วยความจำก็ไม่จำเป็น มันจะเป็นไปได้ที่จะแก้ปัญหานี้โดยใช้หน่วยความจำจำนวนคงที่โดยการอ่านไฟล์ในส่วนที่มีความยาวคงที่และประมวลผลอักขระด้วยตัวอักษรโดยใช้เครื่องสถานะ อย่างไรก็ตามฉันสงสัยว่ามันจะไม่ซับซ้อนสำหรับกรณีการใช้งานทั่วไป

หากไฟล์ของคุณมีขนาดเล็กพอที่จะเล็ดลอดเข้าสู่หน่วยความจำคุณสามารถใช้สิ่งนี้

perl -e 'local($/);$f=<>; $f=~s/\n*$/\n/;print $f;' file

ในไพ ธ อน (ฉันรู้ว่ามันไม่ได้เป็นสิ่งที่คุณต้องการ แต่มันจะดีกว่ามากเพราะมันได้รับการปรับให้ดีที่สุดและโหมโรงเป็นเวอร์ชั่นทุบตี) โดยไม่ต้องเขียนไฟล์ใหม่และไม่ต้องอ่านไฟล์ทั้งหมด (ซึ่งเป็นสิ่งที่ดีถ้าไฟล์นั้น มีขนาดใหญ่มาก):

#!/bin/python
import sys
infile = open(sys.argv[1], 'r+')
infile.seek(-1, 2)
while infile.read(1) == '\n':
  infile.seek(-2, 1)
infile.seek(1, 1)
infile.truncate()
infile.close()

โปรดทราบว่ามันไม่สามารถใช้งานได้กับไฟล์ที่อักขระ EOL ไม่ใช่ '\ n'

เวอร์ชันทุบตีการนำอัลกอริทึมของไพ ธ อนมาใช้ แต่มีประสิทธิภาพน้อยลงเนื่องจากมันต้องการกระบวนการหลายอย่าง:

#!/bin/bash
n=1
while test "$(tail -n $n "$1")" == ""; do
  ((n++))
done
((n--))
truncate -s $(($(stat -c "%s" "$1") - $n)) "$1"

อันนี้พิมพ์ได้อย่างรวดเร็วและถ้าคุณรู้ว่า sed ง่ายต่อการจดจำ:

tac < file | sed '/[^[:blank:]]/,$!d' | tac

มันใช้สคริปต์ sed เพื่อลบบรรทัดว่างนำหน้าจากสคริปต์บรรทัดเดียวที่มีประโยชน์สำหรับ sedอ้างอิงโดย Alexey ด้านบนและ tac (reverse cat)

ในการทดสอบอย่างรวดเร็วในไฟล์ขนาด 18MB, 64,000 บรรทัดแนวทางของ Alexey นั้นเร็วขึ้น (0.036 เทียบกับ 0.046 วินาที)