การอ่านไฟล์ที่คั่นด้วยแท็บด้วย Pandas - ทำงานบน Windows แต่ใช้ไม่ได้กับ Mac

ฉันอ่านไฟล์ข้อมูลที่คั่นด้วยแท็บใน Windows ด้วย Pandas / Python โดยไม่มีปัญหาใด ๆ ไฟล์ข้อมูลมีบันทึกย่อในสามบรรทัดแรกและตามด้วยส่วนหัว

df = pd.read_csv(myfile,sep='\t',skiprows=(0,1,2),header=(0))

ตอนนี้ฉันกำลังพยายามอ่านไฟล์นี้ด้วย Mac ของฉัน (ครั้งแรกของฉันที่ใช้ Python บน Mac) ฉันได้รับข้อผิดพลาดต่อไปนี้

pandas.parser.CParserError: Error tokenizing data. C error: Expected 1
fields in line 8, saw 39

หากตั้งค่าอาร์กิวเมนต์error_bad_linesสำหรับread_csvเป็นFalseฉันจะได้รับข้อมูลต่อไปนี้ซึ่งจะดำเนินต่อไปจนจบแถวสุดท้าย

Skipping line 8: expected 1 fields, saw 39
Skipping line 9: expected 1 fields, saw 125
Skipping line 10: expected 1 fields, saw 125
Skipping line 11: expected 1 fields, saw 125
Skipping line 12: expected 1 fields, saw 125
Skipping line 13: expected 1 fields, saw 125
Skipping line 14: expected 1 fields, saw 125
Skipping line 15: expected 1 fields, saw 125
Skipping line 16: expected 1 fields, saw 125
Skipping line 17: expected 1 fields, saw 125
...

ฉันต้องระบุค่าสำหรับอาร์กิวเมนต์การเข้ารหัสหรือไม่ ดูเหมือนว่าฉันไม่ควรทำเพราะการอ่านไฟล์ทำงานได้ดีบน Windows

เบาะแสที่ใหญ่ที่สุดคือแถวทั้งหมดจะถูกส่งกลับในบรรทัดเดียว สิ่งนี้บ่งชี้ว่าตัวยุติบรรทัดกำลังถูกละเว้นหรือไม่มีอยู่

คุณสามารถระบุตัวยุติบรรทัดสำหรับ csv_reader ถ้าคุณอยู่ในแม็บรรทัดที่สร้างขึ้นจะจบลงด้วย\rมากกว่าลินุกซ์มาตรฐาน\nหรือดีกว่ายังคงเป็น suspenders \r\nและเข็มขัดวิธีการของหน้าต่าง

pandas.read_csv(filename, sep='\t', lineterminator='\r')

คุณยังสามารถเปิดข้อมูลทั้งหมดของคุณโดยใช้แพ็คเกจตัวแปลงสัญญาณ ซึ่งอาจเพิ่มความทนทานเนื่องจากความเร็วในการโหลดเอกสารลดลง

import codecs

doc = codecs.open('document','rU','UTF-16') #open for reading with "universal" type set

df = pandas.read_csv(doc, sep='\t')

อีกทางเลือกหนึ่งคือการเพิ่มengine='python'คำสั่งpandas.read_csv(filename, sep='\t', engine='python')