วิธีการซ่อมแซมสตริงที่เป็นอนุกรมซึ่งเสียหายจากความยาวนับไบต์ที่ไม่ถูกต้อง

ฉันใช้ Hotaru CMS กับปลั๊กอินอัพโหลดรูปภาพฉันได้รับข้อผิดพลาดนี้หากฉันพยายามแนบรูปภาพไปยังโพสต์มิฉะนั้นจะไม่มีข้อผิดพลาด:

Unserialize () [function.unserialize]: เกิดข้อผิดพลาดที่ offset

รหัสที่กระทำผิด (ข้อผิดพลาดชี้ให้สอดคล้องกับ **):

/**
     * Retrieve submission step data
     *
     * @param $key - empty when setting
     * @return bool
     */
    public function loadSubmitData($h, $key = '')
    {
        // delete everything in this table older than 30 minutes:
        $this->deleteTempData($h->db);

        if (!$key) { return false; }

        $cleanKey = preg_replace('/[^a-z0-9]+/','',$key);
        if (strcmp($key,$cleanKey) != 0) {
            return false;
        } else {
            $sql = "SELECT tempdata_value FROM " . TABLE_TEMPDATA . " WHERE tempdata_key = %s ORDER BY tempdata_updatedts DESC LIMIT 1";
            $submitted_data = $h->db->get_var($h->db->prepare($sql, $key));
            **if ($submitted_data) { return unserialize($submitted_data); } else { return false; }** 
        }
    }

ข้อมูลจากตารางสังเกตว่าบิตท้ายมีข้อมูลรูปภาพฉันไม่ใช่ผู้เชี่ยวชาญด้าน PHP ดังนั้นฉันจึงสงสัยว่าพวกคุณ / เพื่อน ๆ คิดอย่างไร?

tempdata_value:

a:10:{s:16:"submit_editorial";b:0;s:15:"submit_orig_url";s:13:"www.bbc.co.uk";s:12:"submit_title";s:14:"No title found";s:14:"submit_content";s:12:"dnfsdkfjdfdf";s:15:"submit_category";i:2;s:11:"submit_tags";s:3:"bbc";s:9:"submit_id";b:0;s:16:"submit_subscribe";i:0;s:15:"submit_comments";s:4:"open";s:5:"image";s:19:"C:fakepath100.jpg";}

แก้ไข: ฉันคิดว่าฉันพบบิตซีเรียลไลซ์ ...

/**
     * Save submission step data
     *
     * @return bool
     */
    public function saveSubmitData($h)
    {
        // delete everything in this table older than 30 minutes:
        $this->deleteTempData($h->db);

        $sid = preg_replace('/[^a-z0-9]+/i', '', session_id());
        $key = md5(microtime() . $sid . rand());
        $sql = "INSERT INTO " . TABLE_TEMPDATA . " (tempdata_key, tempdata_value, tempdata_updateby) VALUES (%s,%s, %d)";
        $h->db->query($h->db->prepare($sql, $key, serialize($h->vars['submitted_data']), $h->currentUser->id));
        return $key;
    }

unserialize() [function.unserialize]: Error at offsetเป็นค่าธรรมเนียมinvalid serialization dataเนื่องจากความยาวไม่ถูกต้อง

แก้ไขด่วน

สิ่งที่คุณสามารถทำได้คือrecalculating the lengthองค์ประกอบในอาร์เรย์แบบอนุกรม

คุณเป็นข้อมูลอนุกรมปัจจุบัน

$data = 'a:10:{s:16:"submit_editorial";b:0;s:15:"submit_orig_url";s:13:"www.bbc.co.uk";s:12:"submit_title";s:14:"No title found";s:14:"submit_content";s:12:"dnfsdkfjdfdf";s:15:"submit_category";i:2;s:11:"submit_tags";s:3:"bbc";s:9:"submit_id";b:0;s:16:"submit_subscribe";i:0;s:15:"submit_comments";s:4:"open";s:5:"image";s:19:"C:fakepath100.jpg";}';

ตัวอย่างโดยไม่ต้องคำนวณใหม่

var_dump(unserialize($data));

เอาต์พุต

Notice: unserialize() [function.unserialize]: Error at offset 337 of 338 bytes

การคำนวณใหม่

$data = preg_replace('!s:(\d+):"(.*?)";!e', "'s:'.strlen('$2').':\"$2\";'", $data);
var_dump(unserialize($data));

เอาต์พุต

array
  'submit_editorial' => boolean false
  'submit_orig_url' => string 'www.bbc.co.uk' (length=13)
  'submit_title' => string 'No title found' (length=14)
  'submit_content' => string 'dnfsdkfjdfdf' (length=12)
  'submit_category' => int 2
  'submit_tags' => string 'bbc' (length=3)
  'submit_id' => boolean false
  'submit_subscribe' => int 0
  'submit_comments' => string 'open' (length=4)
  'image' => string 'C:fakepath100.jpg' (length=17)

คำแนะนำ .. I

แทนที่จะใช้การแก้ไขด่วนแบบนี้ ... ฉันจะแนะนำให้คุณอัปเดตคำถามด้วย

• คุณจัดลำดับข้อมูลของคุณอย่างไร

• วิธีการบันทึก ..

================================ แก้ไข 1 ================ ===============

ความผิดพลาด

ข้อผิดพลาดถูกสร้างขึ้นเนื่องจากการใช้เครื่องหมายคำพูดคู่"แทนใบเสนอราคาเดียว'นั่นคือเหตุผลที่C:\fakepath\100.pngถูกแปลงเป็นC:fakepath100.jpg

เพื่อแก้ไขข้อผิดพลาด

คุณต้องเปลี่ยน$h->vars['submitted_data']จาก (สังเกตว่า singe ค่อนข้าง')

แทนที่

 $h->vars['submitted_data']['image'] = "C:\fakepath\100.png" ;

ด้วย

 $h->vars['submitted_data']['image'] = 'C:\fakepath\100.png' ;

ตัวกรองเพิ่มเติม

คุณยังสามารถเพิ่มตัวกรองง่ายๆนี้ก่อนที่คุณจะเรียกอนุกรม

function satitize(&$value, $key)
{
    $value = addslashes($value);
}

array_walk($h->vars['submitted_data'], "satitize");

หากคุณมีอักขระ UTF คุณสามารถเรียกใช้

 $h->vars['submitted_data'] = array_map("utf8_encode",$h->vars['submitted_data']);

วิธีตรวจสอบปัญหาในข้อมูลอนุกรมในอนาคต

  findSerializeError ( $data1 ) ;

เอาต์พุต

Diffrence 9 != 7
    -> ORD number 57 != 55
    -> Line Number = 315
    -> Section Data1  = pen";s:5:"image";s:19:"C:fakepath100.jpg
    -> Section Data2  = pen";s:5:"image";s:17:"C:fakepath100.jpg
                                            ^------- The Error (Element Length)

findSerializeError ฟังก์ชัน

function findSerializeError($data1) {
    echo "<pre>";
    $data2 = preg_replace ( '!s:(\d+):"(.*?)";!e', "'s:'.strlen('$2').':\"$2\";'",$data1 );
    $max = (strlen ( $data1 ) > strlen ( $data2 )) ? strlen ( $data1 ) : strlen ( $data2 );

    echo $data1 . PHP_EOL;
    echo $data2 . PHP_EOL;

    for($i = 0; $i < $max; $i ++) {

        if (@$data1 {$i} !== @$data2 {$i}) {

            echo "Diffrence ", @$data1 {$i}, " != ", @$data2 {$i}, PHP_EOL;
            echo "\t-> ORD number ", ord ( @$data1 {$i} ), " != ", ord ( @$data2 {$i} ), PHP_EOL;
            echo "\t-> Line Number = $i" . PHP_EOL;

            $start = ($i - 20);
            $start = ($start < 0) ? 0 : $start;
            $length = 40;

            $point = $max - $i;
            if ($point < 20) {
                $rlength = 1;
                $rpoint = - $point;
            } else {
                $rpoint = $length - 20;
                $rlength = 1;
            }

            echo "\t-> Section Data1  = ", substr_replace ( substr ( $data1, $start, $length ), "<b style=\"color:green\">{$data1 {$i}}</b>", $rpoint, $rlength ), PHP_EOL;
            echo "\t-> Section Data2  = ", substr_replace ( substr ( $data2, $start, $length ), "<b style=\"color:red\">{$data2 {$i}}</b>", $rpoint, $rlength ), PHP_EOL;
        }

    }

}

วิธีที่ดีกว่าในการบันทึกลงในฐานข้อมูล

$toDatabse = base64_encode(serialize($data));  // Save to database
$fromDatabase = unserialize(base64_decode($data)); //Getting Save Format 

ฉันไม่มีชื่อเสียงมากพอที่จะแสดงความคิดเห็นดังนั้นฉันหวังว่าจะมีคนเห็นสิ่งนี้โดยใช้คำตอบที่ "ถูกต้อง" ข้างต้น:

เนื่องจาก php 5.5 the / e modifier ใน preg_replace () ถูกเลิกใช้งานโดยสิ้นเชิงและ preg_match ด้านบนจะผิดพลาด เอกสารประกอบ php แนะนำให้ใช้ preg_match_callback แทน

โปรดค้นหาวิธีแก้ไขปัญหาต่อไปนี้เป็นทางเลือกนอกเหนือจาก preg_match ที่เสนอข้างต้น

$fixed_data = preg_replace_callback ( '!s:(\d+):"(.*?)";!', function($match) {      
    return ($match[1] == strlen($match[2])) ? $match[0] : 's:' . strlen($match[2]) . ':"' . $match[2] . '";';
},$bad_data );

มีอีกสาเหตุหนึ่งที่unserialize()ล้มเหลวเนื่องจากคุณใส่ข้อมูลซีเรียลลงในฐานข้อมูลอย่างไม่ถูกต้องโปรดดูคำอธิบายอย่างเป็นทางการที่นี่ เนื่องจากserialize()ส่งคืนข้อมูลไบนารีและตัวแปร php ไม่สนใจวิธีการเข้ารหัสดังนั้นการใส่ลงใน TEXT VARCHAR () จะทำให้เกิดข้อผิดพลาดนี้

วิธีแก้ไข: จัดเก็บข้อมูลแบบอนุกรมลงใน BLOB ในตารางของคุณ

แก้ไขด่วน

การคำนวณความยาวขององค์ประกอบใหม่ในอาร์เรย์แบบอนุกรม - แต่อย่าใช้ (preg_replace) ซึ่งเลิกใช้แล้ว - ควรใช้ preg_replace_callback ดีกว่า:

แก้ไข: เวอร์ชันใหม่ไม่ใช่แค่ความยาวที่ผิด แต่ยังแก้ไขการแบ่งบรรทัดและนับอักขระที่ถูกต้องด้วย aczent (ขอบคุณmickmackusa )

// New Version
$data = preg_replace_callback('!s:\d+:"(.*?)";!s', function($m) { return "s:" . strlen($m[1]) . ':"'.$m[1].'";'; }, $data);

ข้อผิดพลาดนี้เกิดขึ้นเนื่องจากชุดอักขระของคุณไม่ถูกต้อง

ตั้งค่าชุดอักขระหลังจากแท็กเปิด:

header('Content-Type: text/html; charset=utf-8');

และตั้งค่า charset utf8 ในฐานข้อมูลของคุณ:

mysql_query("SET NAMES 'utf8'");

คุณสามารถแก้ไขสตริงซีเรียลไลซ์ที่เสียหายได้โดยใช้ฟังก์ชันต่อไปนี้ด้วยการจัดการอักขระแบบหลายไบต์

function repairSerializeString($value)
{

    $regex = '/s:([0-9]+):"(.*?)"/';

    return preg_replace_callback(
        $regex, function($match) {
            return "s:".mb_strlen($match[2]).":\"".$match[2]."\""; 
        },
        $value
    );
}

$badData = 'a:2:{i:0;s:16:"as:45:"d";
Is \n";i:1;s:19:"as:45:"d";
Is \r\n";}';

คุณไม่สามารถแก้ไขสตริงซีเรียลไลซ์ที่เสียหายโดยใช้ regexes ที่เสนอ:

$data = preg_replace('!s:(\d+):"(.*?)";!e', "'s:'.strlen('$2').':\"$2\";'", $badData);
var_dump(@unserialize($data)); // Output: bool(false)

// or

$data = preg_replace_callback(
    '/s:(\d+):"(.*?)";/',
    function($m){
        return 's:' . strlen($m[2]) . ':"' . $m[2] . '";';
    },
    $badData
);
var_dump(@unserialize($data)); // Output: bool(false)

คุณสามารถแก้ไขสตริงซีเรียลไลซ์ที่เสียหายโดยใช้ regex ต่อไปนี้:

$data = preg_replace_callback(
    '/(?<=^|\{|;)s:(\d+):\"(.*?)\";(?=[asbdiO]\:\d|N;|\}|$)/s',
    function($m){
        return 's:' . strlen($m[2]) . ':"' . $m[2] . '";';
    },
    $badData
);

var_dump(@unserialize($data));

เอาต์พุต

array(2) {
  [0] =>
  string(17) "as:45:"d";
Is \n"
  [1] =>
  string(19) "as:45:"d";
Is \r\n"
}

หรือ

array(2) {
  [0] =>
  string(16) "as:45:"d";
Is \n"
  [1] =>
  string(18) "as:45:"d";
Is \r\n"
}

public function unserializeKeySkills($string) {
    $output = array();
    $string = trim(preg_replace('/\s\s+/', ' ',$string));
    $string = preg_replace_callback('!s:(\d+):"(.*?)";!', function($m) { return 's:'.strlen($m[2]).':"'.$m[2].'";'; }, utf8_encode( trim(preg_replace('/\s\s+/', ' ',$string)) ));
    try {
        $output =  unserialize($string);
    } catch (\Exception $e) {
        \Log::error("unserialize Data : " .print_r($string,true));
    }
    return $output;
}

เอกสารอย่างเป็นทางการกล่าวว่าควรจะกลับ E_NOTICE เท็จและชุด

แต่เนื่องจากคุณได้รับข้อผิดพลาดการรายงานข้อผิดพลาดจึงถูกตั้งค่าให้เรียกใช้โดย E_NOTICE

นี่คือการแก้ไขเพื่อให้คุณตรวจพบเท็จที่ส่งคืนโดย unserialize

$old_err=error_reporting(); 
error_reporting($old_err & ~E_NOTICE);
$object = unserialize($serialized_data);
error_reporting($old_err);

คุณอาจต้องการพิจารณาใช้การเข้ารหัส / ถอดรหัส base64

$string=base64_encode(serialize($obj));
unserialize(base64_decode($string));

ความเสียหายในคำถามนี้แยกเป็นสตริงย่อยเดียวที่ส่วนท้ายของสตริงที่ทำให้เป็นอนุกรมด้วยอาจถูกแทนที่ด้วยตนเองโดยผู้ที่ต้องการอัปเดตimageชื่อไฟล์อย่างขี้เกียจ ความจริงนี้จะปรากฏในลิงค์สาธิตของฉันด้านล่างโดยใช้ข้อมูลที่โพสต์ของ OP - กล่าวโดยย่อคือC:fakepath100.jpgไม่มีความยาว1917มันควรจะเป็น

เนื่องจากความเสียหายของสตริงที่ทำให้เป็นอนุกรมถูก จำกัด ไว้ที่จำนวนไบต์ / จำนวนอักขระที่ไม่ถูกต้องสิ่งต่อไปนี้จะทำงานได้ดีในการอัปเดตสตริงที่เสียหายด้วยค่าจำนวนไบต์ที่ถูกต้อง

การแทนที่ตาม regex ต่อไปนี้จะมีผลในการแก้ไขจำนวนไบต์เท่านั้นไม่มีอะไรเพิ่มเติม

ดูเหมือนว่าโพสต์ก่อนหน้านี้หลาย ๆ โพสต์เป็นเพียงการคัดลอกรูปแบบนิพจน์ทั่วไปจากบุคคลอื่น ไม่มีเหตุผลที่จะจับหมายเลขจำนวนไบต์ที่อาจเสียหายได้หากจะไม่ใช้ในการแทนที่ นอกจากนี้การเพิ่มsตัวปรับเปลี่ยนรูปแบบเป็นการรวมที่สมเหตุสมผลในกรณีที่ค่าสตริงมีการขึ้นบรรทัดใหม่ / การส่งคืนบรรทัด

* สำหรับผู้ที่ไม่ทราบถึงการรักษาอักขระหลายไบต์ด้วยการทำให้เป็นอนุกรมคุณต้องไม่ใช้mb_strlen()ในการเรียกกลับแบบกำหนดเองเนื่องจากเป็นการนับไบต์ที่เก็บไว้ไม่ใช่จำนวนอักขระดูผลลัพธ์ของฉัน ...

รหัส: (การสาธิตด้วยข้อมูลของ OP ) (การสาธิตด้วยข้อมูลตัวอย่างโดยพลการ ) (การสาธิตที่มีการแทนที่เงื่อนไข )

$corrupted = <<<STRING
a:4:{i:0;s:3:"three";i:1;s:5:"five";i:2;s:2:"newline1
newline2";i:3;s:6:"garçon";}
STRING;

$repaired = preg_replace_callback(
        '/s:\d+:"(.*?)";/s',
        //  ^^^- matched/consumed but not captured because not used in replacement
        function ($m) {
            return "s:" . strlen($m[1]) . ":\"{$m[1]}\";";
        },
        $corrupted
    );

echo $corrupted , "\n" , $repaired;
echo "\n---\n";
var_export(unserialize($repaired));

เอาท์พุต:

a:4:{i:0;s:3:"three";i:1;s:5:"five";i:2;s:2:"newline1
Newline2";i:3;s:6:"garçon";}
a:4:{i:0;s:5:"three";i:1;s:4:"five";i:2;s:17:"newline1
Newline2";i:3;s:7:"garçon";}
---
array (
  0 => 'three',
  1 => 'five',
  2 => 'newline1
Newline2',
  3 => 'garçon',
)

ขาเดียวลงโพรงกระต่าย ...ข้างต้นใช้งานได้ดีแม้ว่าอัญประกาศคู่จะเกิดขึ้นในค่าสตริง แต่ถ้าค่าสตริงมี";หรือมีค่าอื่น ๆ ในการเชื่อมต่อแบบลิงคุณจะต้องดำเนินการต่อไปอีกเล็กน้อยและใช้ "lookarounds" รูปแบบใหม่ของฉัน

ตรวจสอบว่าผู้นำsคือ:

• จุดเริ่มต้นของสตริงอินพุตทั้งหมดหรือ
• นำหน้าด้วย ;

และตรวจสอบว่า";คือ:

• ที่ส่วนท้ายของสตริงอินพุตทั้งหมดหรือ
• ติดตามโดย }หรือ
• ตามด้วยการประกาศสตริงหรือจำนวนเต็มs:หรือi:

ฉันไม่ได้ทดสอบความเป็นไปได้แต่ละอย่าง ในความเป็นจริงฉันค่อนข้างไม่คุ้นเคยกับความเป็นไปได้ทั้งหมดในสตริงที่ทำให้เป็นอนุกรมเพราะฉันไม่เคยเลือกที่จะทำงานกับข้อมูลที่เป็นอนุกรม - มักจะใช้ json ในแอปพลิเคชันสมัยใหม่ หากมีอักขระนำหน้าหรือต่อท้ายที่เป็นไปได้เพิ่มเติมโปรดแสดงความคิดเห็นแล้วฉันจะขยายการค้นหา

ตัวอย่างข้อมูลเพิ่มเติม: (การสาธิต )

$corrupted_byte_counts = <<<STRING
a:12:{i:0;s:3:"three";i:1;s:5:"five";i:2;s:2:"newline1
newline2";i:3;s:6:"garçon";i:4;s:111:"double " quote \"escaped";i:5;s:1:"a,comma";i:6;s:9:"a:colon";i:7;s:0:"single 'quote";i:8;s:999:"semi;colon";s:5:"assoc";s:3:"yes";i:9;s:1:"monkey";wrenching doublequote-semicolon";s:3:"s:";s:9:"val s: val";}
STRING;

$repaired = preg_replace_callback(
        '/(?<=^|;)s:\d+:"(.*?)";(?=$|}|[si]:)/s',
        //^^^^^^^^--------------^^^^^^^^^^^^^-- some additional validation
        function ($m) {
            return 's:' . strlen($m[1]) . ":\"{$m[1]}\";";
        },
        $corrupted_byte_counts
    );

echo "corrupted serialized array:\n$corrupted_byte_counts";
echo "\n---\n";
echo "repaired serialized array:\n$repaired";
echo "\n---\n";
print_r(unserialize($repaired));

เอาท์พุต:

corrupted serialized array:
a:12:{i:0;s:3:"three";i:1;s:5:"five";i:2;s:2:"newline1
newline2";i:3;s:6:"garçon";i:4;s:111:"double " quote \"escaped";i:5;s:1:"a,comma";i:6;s:9:"a:colon";i:7;s:0:"single 'quote";i:8;s:999:"semi;colon";s:5:"assoc";s:3:"yes";i:9;s:1:"monkey";wrenching doublequote-semicolon";s:3:"s:";s:9:"val s: val";}
---
repaired serialized array:
a:12:{i:0;s:5:"three";i:1;s:4:"five";i:2;s:17:"newline1
newline2";i:3;s:7:"garçon";i:4;s:24:"double " quote \"escaped";i:5;s:7:"a,comma";i:6;s:7:"a:colon";i:7;s:13:"single 'quote";i:8;s:10:"semi;colon";s:5:"assoc";s:3:"yes";i:9;s:39:"monkey";wrenching doublequote-semicolon";s:2:"s:";s:10:"val s: val";}
---
Array
(
    [0] => three
    [1] => five
    [2] => newline1
newline2
    [3] => garçon
    [4] => double " quote \"escaped
    [5] => a,comma
    [6] => a:colon
    [7] => single 'quote
    [8] => semi;colon
    [assoc] => yes
    [9] => monkey";wrenching doublequote-semicolon
    [s:] => val s: val
)

คุณจะต้องเปลี่ยนประเภทการจัดเรียงเป็นutf8_unicode_ciและปัญหาจะได้รับการแก้ไข

ในกรณีของฉันฉันกำลังจัดเก็บข้อมูลซีเรียลในBLOBฟิลด์ MySQL DB ซึ่งดูเหมือนว่าจะไม่ใหญ่พอที่จะมีค่าทั้งหมดและถูกตัดทอน เห็นได้ชัดว่าสตริงดังกล่าวไม่สามารถยกเลิกการเข้ารหัสได้
เมื่อแปลงเขตข้อมูลMEDIUMBLOBนั้นแล้วปัญหาก็หายไป นอกจากนี้ยังอาจมีความจำเป็นที่จะเปลี่ยนในตัวเลือกของตารางROW_FORMATไปหรือ DYNAMICCOMPRESSED

หลังจากลองทำบางสิ่งในหน้านี้แล้วไม่ประสบความสำเร็จฉันได้ดูในแหล่งที่มาของหน้าและตั้งข้อสังเกตว่าเครื่องหมายคำพูดทั้งหมดในสตริงที่ทำให้เป็นอนุกรมถูกแทนที่ด้วย html-entities การถอดรหัสเอนทิตีเหล่านี้ช่วยหลีกเลี่ยงอาการปวดหัวได้มาก:

$myVar = html_entity_decode($myVar);

นี่คือเครื่องมือออนไลน์สำหรับแก้ไขสตริงซีเรียลที่เสียหาย

ฉันต้องการเพิ่มว่าสิ่งนี้ส่วนใหญ่เกิดขึ้นเนื่องจากการค้นหาและแทนที่ที่ทำบนฐานข้อมูลและข้อมูลการทำให้เป็นอนุกรม ( โดยเฉพาะไฟล์key length ) ไม่ได้รับการปรับปรุงตามแทนที่และนั่นเป็นสาเหตุที่ทำให้ "การทุจริต"

อย่างไรก็ตามเครื่องมือข้างต้นใช้ตรรกะต่อไปนี้เพื่อแก้ไขข้อมูลการทำให้เป็นอนุกรม ( คัดลอกจากที่นี่ )

function error_correction_serialise($string){
    // at first, check if "fixing" is really needed at all. After that, security checkup.
    if ( unserialize($string) !== true &&  preg_match('/^[aOs]:/', $string) ) {
         $string = preg_replace_callback( '/s\:(\d+)\:\"(.*?)\";/s',    function($matches){return 's:'.strlen($matches[2]).':"'.$matches[2].'";'; },   $string );
    }
    return $string;
} 

อีกสาเหตุหนึ่งของปัญหานี้อาจเป็นประเภทคอลัมน์ของตารางเซสชัน "เพย์โหลด" หากคุณมีข้อมูลจำนวนมากในเซสชันคอลัมน์ข้อความก็ไม่เพียงพอ คุณจะต้องมี MEDIUMTEXT หรือแม้แต่ LONGTEXT