วนซ้ำแต่ละบรรทัดในสตริงใน PHP

ฉันมีแบบฟอร์มที่อนุญาตให้ผู้ใช้อัปโหลดไฟล์ข้อความหรือคัดลอก / วางเนื้อหาของไฟล์ลงในพื้นที่ข้อความ ฉันสามารถแยกความแตกต่างระหว่างทั้งสองได้อย่างง่ายดายและใส่สิ่งที่พวกเขาป้อนลงในตัวแปรสตริง แต่ฉันจะไปจากที่นั่นได้อย่างไร

ฉันจำเป็นต้องวนซ้ำในแต่ละบรรทัดของสตริง (ไม่ควรกังวลเกี่ยวกับการขึ้นบรรทัดใหม่บนเครื่องต่างๆ) ตรวจสอบให้แน่ใจว่ามีโทเค็นเดียว (ไม่มีช่องว่างแท็บเครื่องหมายจุลภาค ฯลฯ ) ล้างข้อมูลจากนั้นสร้างแบบสอบถาม SQL โดยอิงจากบรรทัดทั้งหมด

ฉันเป็นโปรแกรมเมอร์ที่ค่อนข้างเก่งดังนั้นฉันจึงรู้แนวคิดทั่วไปเกี่ยวกับวิธีการทำ แต่มันก็นานมากแล้วที่ฉันทำงานกับ PHP ฉันรู้สึกว่าฉันกำลังค้นหาสิ่งที่ผิดและทำให้ได้ข้อมูลที่ไร้ประโยชน์ ปัญหาสำคัญที่ฉันพบคือฉันต้องการอ่านเนื้อหาของสตริงทีละบรรทัด ถ้าเป็นไฟล์ก็จะง่าย

ส่วนใหญ่ฉันกำลังมองหาฟังก์ชัน PHP ที่มีประโยชน์ไม่ใช่อัลกอริทึมสำหรับวิธีการทำ ข้อเสนอแนะใด ๆ ?

preg_split ตัวแปรที่มีข้อความและวนซ้ำบนอาร์เรย์ที่ส่งคืน:

foreach(preg_split("/((\r?\n)|(\r\n?))/", $subject) as $line){
    // do stuff with $line
} 

ฉันต้องการเสนอทางเลือกที่เร็วกว่ามาก (และมีประสิทธิภาพหน่วยความจำ): strtokแทนที่จะเป็นpreg_split.

$separator = "\r\n";
$line = strtok($subject, $separator);

while ($line !== false) {
    # do something with $line
    $line = strtok( $separator );
}

การทดสอบประสิทธิภาพฉันทำซ้ำ 100 ครั้งในไฟล์ทดสอบที่มี 17,000 บรรทัด: preg_splitใช้เวลา 27.7 วินาทีในขณะที่strtokใช้เวลา 1.4 วินาที

โปรดทราบว่าแม้$separatorถูกกำหนดให้เป็น"\r\n", strtokจะแยกตัวละครทั้ง - และเป็นของ PHP4.1.0 ข้ามบรรทัดว่าง / ราชสกุล

ดูรายการคู่มือ strtok: http://php.net/strtok

หากคุณต้องการจัดการการขึ้นบรรทัดใหม่ในระบบที่แตกต่างกันคุณสามารถใช้ PHP_EOL ค่าคงที่ที่กำหนดไว้ล่วงหน้าของ PHP (http://php.net/manual/en/reserved.constants.php) และใช้ Explode เพื่อหลีกเลี่ยงค่าใช้จ่ายของเอ็นจิ้นนิพจน์ทั่วไป .

$lines = explode(PHP_EOL, $subject);

มันซับซ้อนเกินไปและน่าเกลียด แต่ในความคิดของฉันนี่คือวิธีที่จะไป:

$fp = fopen("php://memory", 'r+');
fputs($fp, $data);
rewind($fp);
while($line = fgets($fp)){
  // deal with $line
}
fclose($fp);

foreach(preg_split('~[\r\n]+~', $text) as $line){
    if(empty($line) or ctype_space($line)) continue; // skip only spaces
    // if(!strlen($line = trim($line))) continue; // or trim by force and skip empty
    // $line is trimmed and nice here so use it
}

^ นี่คือวิธีที่คุณแตกไลน์อย่างถูกต้องข้ามแพลตฟอร์มที่เข้ากันได้กับRegexp:)

ปัญหาหน่วยความจำที่อาจเกิดขึ้นกับstrtok:

เนื่องจากหนึ่งในวิธีแก้ปัญหาที่แนะนำใช้strtokแต่ไม่ได้ชี้ให้เห็นถึงปัญหาหน่วยความจำที่อาจเกิดขึ้น (แม้ว่าจะอ้างว่าหน่วยความจำมีประสิทธิภาพก็ตาม) เมื่อใช้strtokตามคู่มือดังต่อไปนี้:

โปรดทราบว่ามีเพียงการเรียก strtok ครั้งแรกเท่านั้นที่ใช้อาร์กิวเมนต์สตริง การเรียกใช้ strtok ที่ตามมาทุกครั้งจะต้องใช้โทเค็นเท่านั้นเนื่องจากจะติดตามตำแหน่งที่อยู่ในสตริงปัจจุบัน

ทำได้โดยการโหลดไฟล์ลงในหน่วยความจำ หากคุณใช้ไฟล์ขนาดใหญ่คุณจะต้องล้างไฟล์เหล่านั้นหากคุณวนซ้ำไฟล์เสร็จแล้ว

<?php
function process($str) {
    $line = strtok($str, PHP_EOL);

    /*do something with the first line here...*/

    while ($line !== FALSE) {
        // get the next line
        $line = strtok(PHP_EOL);

        /*do something with the rest of the lines here...*/

    }
    //the bit that frees up memory
    strtok('', '');
}

หากคุณกังวลเฉพาะกับไฟล์ฟิสิคัล (เช่น datamining):

ตามคู่มือสำหรับส่วนการอัปโหลดไฟล์คุณสามารถใช้fileคำสั่ง:

 //Create the array
 $lines = file( $some_file );

 foreach ( $lines as $line ) {
   //do something here.
 }

คำตอบของ Kyril ดีที่สุดเมื่อพิจารณาว่าคุณต้องสามารถจัดการกับข่าวใหม่บนเครื่องต่างๆได้

"ส่วนใหญ่ฉันกำลังมองหาฟังก์ชัน PHP ที่เป็นประโยชน์ไม่ใช่อัลกอริทึมสำหรับวิธีการทำงานมีข้อเสนอแนะใด ๆ "

ฉันใช้สิ่งเหล่านี้มาก:

• Explode ()สามารถใช้เพื่อแบ่งสตริงออกเป็นอาร์เรย์โดยให้ตัวคั่นเดียว
• Implode () เป็นคู่ของ Explode เพื่อเปลี่ยนจากอาร์เรย์กลับไปที่สตริง