วิธีทั่วไปในการอ่านไฟล์ในทับทิมคืออะไร?

วิธีทั่วไปในการอ่านไฟล์ในทับทิมคืออะไร?

ตัวอย่างเช่นต่อไปนี้เป็นวิธีการหนึ่ง:

fileObj = File.new($fileName, "r")
while (line = fileObj.gets)
  puts(line)
end
fileObj.close

ฉันรู้ว่าทับทิมมีความยืดหยุ่นสูงมาก ประโยชน์ / ข้อเสียของแต่ละวิธีมีอะไรบ้าง

File.open("my/file/path", "r") do |f|
  f.each_line do |line|
    puts line
  end
end
# File is closed automatically at end of block

นอกจากนี้ยังเป็นไปได้ที่จะปิดไฟล์อย่างชัดเจนหลังจากข้างต้น (ส่งบล็อกเพื่อopenปิดให้คุณ):

f = File.open("my/file/path", "r")
f.each_line do |line|
  puts line
end
f.close

วิธีที่ง่ายที่สุดหากไฟล์ไม่ยาวเกินไป:

puts File.read(file_name)

แน่นอนIO.readหรือFile.readปิดไฟล์โดยอัตโนมัติดังนั้นจึงไม่จำเป็นต้องใช้File.openกับบล็อก

ระวังไฟล์ "slurping" นั่นคือเมื่อคุณอ่านไฟล์ทั้งหมดในหน่วยความจำพร้อมกัน

ปัญหาคือมันไม่ได้ปรับขนาดได้ดี คุณสามารถพัฒนารหัสด้วยไฟล์ที่มีขนาดพอเหมาะจากนั้นนำไปผลิตและพบว่าคุณกำลังพยายามอ่านไฟล์ที่มีหน่วยเป็นกิกะไบต์และโฮสต์ของคุณค้างในขณะที่พยายามอ่านและจัดสรรหน่วยความจำ

I / O แบบบรรทัดต่อบรรทัดนั้นรวดเร็วมากและเกือบจะมีประสิทธิภาพเท่ากับ slurping มันเร็วอย่างน่าประหลาดใจจริงๆ

ฉันชอบที่จะใช้:

IO.foreach("testfile") {|x| print "GOT ", x }

หรือ

File.foreach('testfile') {|x| print "GOT", x }

ไฟล์สืบทอดมาจาก IO และforeachอยู่ใน IO ดังนั้นคุณสามารถใช้อย่างใดอย่างหนึ่ง

ฉันมีเกณฑ์มาตรฐานบางอย่างที่แสดงผลกระทบของการพยายามอ่านไฟล์ขนาดใหญ่ผ่านทางreadเทียบกับ I-O แบบทีละบรรทัดที่ " ทำไม" slurping "ไฟล์จึงไม่ใช่วิธีที่ดี? "

คุณสามารถอ่านไฟล์ทั้งหมดในครั้งเดียว:

content = File.readlines 'file.txt'
content.each_with_index{|line, i| puts "#{i+1}: #{line}"}

เมื่อไฟล์มีขนาดใหญ่หรืออาจมีขนาดใหญ่ก็มักจะดีกว่าในการประมวลผลทีละบรรทัด:

File.foreach( 'file.txt' ) do |line|
  puts line
end

บางครั้งคุณต้องการเข้าถึงตัวจัดการไฟล์หรือควบคุมการอ่านด้วยตนเอง:

File.open( 'file.txt' ) do |f|
  loop do
    break if not line = f.gets
    puts "#{f.lineno}: #{line}"
  end
end

ในกรณีของไฟล์ไบนารีคุณอาจระบุตัวคั่น nil และขนาดบล็อกเช่น:

File.open('file.bin', 'rb') do |f|
  loop do
    break if not buf = f.gets(nil, 80)
    puts buf.unpack('H*')
  end
end

ในที่สุดคุณสามารถทำได้โดยไม่มีบล็อกตัวอย่างเช่นเมื่อประมวลผลหลายไฟล์พร้อมกัน ในกรณีนั้นไฟล์จะต้องปิดอย่างชัดเจน (ปรับปรุงตามความคิดเห็นของ @antinome):

begin
  f = File.open 'file.txt'
  while line = f.gets
    puts line
  end
ensure
  f.close
end

อ้างอิง: ไฟล์ APIและIO API

วิธีการง่าย ๆ อย่างหนึ่งคือการใช้readlines:

my_array = IO.readlines('filename.txt')

แต่ละบรรทัดในไฟล์อินพุตจะเป็นรายการในอาร์เรย์ วิธีการจัดการการเปิดและปิดไฟล์สำหรับคุณ

file_content = File.read('filename with extension');
puts file_content;

http://www.ruby-doc.org/core-1.9.3/IO.html#method-c-read

ฉันมักจะทำสิ่งนี้:

open(path_in_string, &:read)

นี่จะให้ข้อความทั้งหมดเป็นวัตถุสตริง ใช้งานได้กับ Ruby 1.9 เท่านั้น

ส่งคืนnบรรทัดสุดท้ายจาก your_file.log หรือ. txt

path = File.join(Rails.root, 'your_folder','your_file.log')

last_100_lines = `tail -n 100 #{path}`

วิธีที่มีประสิทธิภาพมากขึ้นคือการสตรีมโดยขอให้เคอร์เนลของระบบปฏิบัติการเปิดไฟล์จากนั้นอ่านไบต์จากมันทีละนิด เมื่ออ่านไฟล์ต่อบรรทัดใน Ruby ข้อมูลจะถูกนำมาจากไฟล์ 512 ไบต์ในแต่ละครั้งและแยกเป็น“ เส้น” หลังจากนั้น

โดยการบัฟเฟอร์เนื้อหาของไฟล์จำนวนการโทร I / O จะลดลงในขณะที่แบ่งไฟล์ในกลุ่มตรรกะ

ตัวอย่าง:

เพิ่มคลาสนี้ลงในแอปของคุณเป็นวัตถุบริการ:

class MyIO
  def initialize(filename)
    fd = IO.sysopen(filename)
    @io = IO.new(fd)
    @buffer = ""
  end

  def each(&block)
    @buffer << @io.sysread(512) until @buffer.include?($/)

    line, @buffer = @buffer.split($/, 2)

    block.call(line)
    each(&block)
  rescue EOFError
    @io.close
 end
end

เรียกมันและส่งผ่าน:eachวิธีการบล็อก:

filename = './somewhere/large-file-4gb.txt'
MyIO.new(filename).each{|x| puts x }

อ่านเกี่ยวกับที่นี่ในโพสต์รายละเอียดนี้:

Ruby Magic Slurping & สตรีมไฟล์โดย AppSignal

content = `cat file`

ฉันคิดว่าวิธีนี้เป็นวิธีที่ "ผิดปกติ" ที่สุด อาจจะเป็นเรื่องยุ่งยาก แต่ก็ใช้งานได้หากcatติดตั้งแล้ว