วิธีการร้องขอ HTTP แบบอะซิงโครนัสใน PHP


209

มีวิธีใน PHP ในการโทร HTTP แบบอะซิงโครนัสหรือไม่? ฉันไม่สนใจเกี่ยวกับการตอบสนองฉันแค่อยากทำอะไรบางอย่างfile_get_contents()แต่อย่ารอให้คำขอเสร็จสิ้นก่อนที่จะประมวลผลโค้ดที่เหลือ นี่จะเป็นประโยชน์อย่างยิ่งสำหรับการตั้งค่า "เหตุการณ์" ของการเรียงลำดับในแอปพลิเคชันของฉันหรือเรียกกระบวนการที่ยาว

ความคิดใด ๆ


9
ฟังก์ชั่นเดียว - 'curl_multi', มองหาเอกสาร php ควรแก้ปัญหาของคุณ
James Butler

22
ชื่อของโพสต์นี้ทำให้เข้าใจผิด ฉันมองหาการโทรแบบอะซิงโครนัสอย่างแท้จริงคล้ายกับคำขอใน Node.js หรือคำขอ AJAX คำตอบที่ยอมรับไม่ได้เป็นแบบอะซิงโครนัส (บล็อกและไม่มีการโทรกลับ) เป็นเพียงคำขอซิงโครนัสที่เร็ว ลองเปลี่ยนคำถามหรือคำตอบที่ยอมรับได้
Johntron

การเล่นโดยใช้การจัดการการเชื่อมต่อผ่านส่วนหัวและบัฟเฟอร์จะไม่กันกระสุน ฉันเพิ่งโพสต์คำตอบใหม่ที่เป็นอิสระจากระบบปฏิบัติการเบราว์เซอร์หรือ PHP
เวอร์ชัน

1
อะซิงโครนัสไม่ได้หมายความว่าคุณไม่สนใจคำตอบ นั่นหมายถึงการโทรไม่ได้บล็อกการประมวลผลเธรดหลัก แบบอะซิงโครนัสยังต้องการการตอบสนอง แต่การตอบสนองสามารถดำเนินการได้ในเธรดการทำงานอื่นหรือใหม่กว่าในลูปเหตุการณ์ คำถามนี้ถามถึงการร้องขอแบบ fire-and-forget ซึ่งสามารถเป็นแบบซิงโครนัสหรือแบบอะซิงโครนัสขึ้นอยู่กับความหมายของการส่งข้อความไม่ว่าคุณจะสนใจเกี่ยวกับคำสั่งข้อความหรือการยืนยันการส่ง
CMCDragonkai

ฉันคิดว่าคุณควรจะทำคำขอ HTTP แบบ Fire นี้ในโหมดไม่บล็อก (w / c คือสิ่งที่คุณต้องการจริงๆ) .. เพราะเมื่อคุณโทรหาทรัพยากรคุณต้องการรู้ว่าถ้าคุณไปถึงเซิร์ฟเวอร์หรือไม่ (หรือด้วยเหตุผลใดก็ตาม คุณเพียงแค่ต้องการการตอบสนอง) คำตอบที่ดีที่สุดคือ fsockopen และการตั้งค่าการอ่านหรือเขียนสตรีมไปยังโหมดที่ไม่ปิดกั้น มันเหมือนการโทรและลืม
KiX Ortillan

คำตอบ:


42

คำตอบที่ฉันยอมรับก่อนหน้านี้ไม่ทำงาน มันยังคงรอการตอบกลับ สิ่งนี้ใช้ได้ผลจากฉันจะขอ GET แบบอะซิงโครนัสใน PHP ได้อย่างไร

function post_without_wait($url, $params)
{
    foreach ($params as $key => &$val) {
      if (is_array($val)) $val = implode(',', $val);
        $post_params[] = $key.'='.urlencode($val);
    }
    $post_string = implode('&', $post_params);

    $parts=parse_url($url);

    $fp = fsockopen($parts['host'],
        isset($parts['port'])?$parts['port']:80,
        $errno, $errstr, 30);

    $out = "POST ".$parts['path']." HTTP/1.1\r\n";
    $out.= "Host: ".$parts['host']."\r\n";
    $out.= "Content-Type: application/x-www-form-urlencoded\r\n";
    $out.= "Content-Length: ".strlen($post_string)."\r\n";
    $out.= "Connection: Close\r\n\r\n";
    if (isset($post_string)) $out.= $post_string;

    fwrite($fp, $out);
    fclose($fp);
}

67
นี่ไม่ใช่ async! โดยเฉพาะอย่างยิ่งถ้าเซิร์ฟเวอร์ในอีกด้านหนึ่งของรหัสนี้จะหยุดทำงานเป็นเวลา 30 วินาที (พารามิเตอร์ที่ 5 ใน fsockopen) fwrite จะต้องใช้เวลาที่ดีในการดำเนินการ (ที่คุณสามารถ จำกัด ด้วย stream_set_timeout ($ fp, $ my_timeout) สิ่งที่ดีที่สุดที่คุณสามารถทำได้คือการตั้งค่าการหมดเวลาต่ำใน fsockopen ถึง 0.1 (100ms) และ $ my_timeout ถึง 100ms คุณมีความเสี่ยงที่คำขอหมดเวลา
Chris Cinelli

3
ฉันรับรองกับคุณว่ามันเป็นแบบซิงค์และไม่ใช้เวลา 30 วินาที นั่นเป็นการหมดเวลาสูงสุด เป็นไปได้ว่าการตั้งค่าของคุณจะแตกต่างกันทำให้เกิดเอฟเฟกต์นั้น แต่มันใช้งานได้ดีสำหรับฉัน
เบรนต์

11
@UltimateBrent ไม่มีอะไรในรหัสที่บ่งบอกว่ามันไม่ตรงกัน ไม่รอการตอบกลับ แต่นั่นไม่ได้เป็นแบบอะซิงโครนัส หากเซิร์ฟเวอร์ระยะไกลเปิดการเชื่อมต่อแล้วแฮงค์รหัสนี้จะรอ 30 วินาทีจนกว่าคุณจะหมดเวลาใช้งาน
chmac

17
เหตุผลที่ดูเหมือนว่าจะทำงาน "async" เพราะคุณไม่ได้อ่านจากซ็อกเก็ตก่อนที่จะปิดมันจึงไม่แขวนแม้ว่าเซิร์ฟเวอร์จะไม่ตอบสนองทันเวลา อย่างไรก็ตามนี่ไม่ใช่ async อย่างแน่นอน หากบัฟเฟอร์การเขียนเต็ม (เป็นไปได้น้อยมาก) สคริปต์ของคุณจะหยุดอยู่ที่นั่น คุณควรพิจารณาเปลี่ยนชื่อเรื่องเป็น "ขอหน้าเว็บโดยไม่รอการตอบกลับ"
howanghk

3
นี่ไม่ใช่ async หรือใช้ curl คุณกล้าโทรออกcurl_post_asyncและรับ upvotes ได้อย่างไร ...
Daniel W.

27

หากคุณควบคุมเป้าหมายที่คุณต้องการโทรแบบอะซิงโครนัส (เช่น "longtask.php" ของคุณเอง) คุณสามารถปิดการเชื่อมต่อจากปลายสายนั้นและสคริปต์ทั้งสองจะทำงานแบบขนาน มันทำงานได้เช่นนี้:

  1. quick.php เปิด longtask.php ผ่าน cURL (ไม่มีเวทย์มนตร์ที่นี่)
  2. longtask.php ปิดการเชื่อมต่อและดำเนินการต่อ (magic!)
  3. cURL กลับสู่ quick.php เมื่อปิดการเชื่อมต่อ
  4. ทั้งสองงานดำเนินการต่อในแบบคู่ขนาน

ฉันได้ลองแล้วและมันก็ใช้ได้ดี แต่ quick.php จะไม่รู้อะไรเกี่ยวกับการทำงานของ longtask.php เว้นแต่ว่าคุณจะสร้างวิธีการสื่อสารระหว่างกระบวนการ

ลองใช้รหัสนี้ใน longtask.php ก่อนที่คุณจะทำสิ่งใด มันจะปิดการเชื่อมต่อ แต่ยังคงทำงานต่อไป (และระงับเอาต์พุตใด ๆ ):

while(ob_get_level()) ob_end_clean();
header('Connection: close');
ignore_user_abort();
ob_start();
echo('Connection Closed');
$size = ob_get_length();
header("Content-Length: $size");
ob_end_flush();
flush();

รหัสถูกคัดลอกมาจากบันทึกย่อที่ผู้ใช้มีส่วนร่วมของ PHPและค่อนข้างดีขึ้น


3
สิ่งนี้จะได้ผล แต่ถ้าคุณใช้เฟรมเวิร์ก MVC อาจเป็นเรื่องยากที่จะนำมาใช้เพราะวิธีการที่เฟรมเวิร์กเหล่านี้สกัดกั้นและการโทรซ้ำ ตัวอย่างเช่นมันไม่ทำงานใน Controller ใน CakePHP
Chris Cinelli

มีข้อสงสัยเกี่ยวกับรหัสนี้กระบวนการที่คุณต้องทำใน longtask ต้องไปตามบรรทัดนี้หรือไม่? ขอบคุณ
morgar

มันใช้งานไม่ได้อย่างสมบูรณ์ ลองเพิ่มwhile(true);หลังจากรหัสของคุณ หน้าจะหยุดซึ่งหมายความว่ามันยังคงทำงานอยู่เบื้องหน้า
زياد

17

คุณสามารถใช้เล่ห์เหลี่ยมโดยใช้ exec () เพื่อเรียกสิ่งที่สามารถทำคำขอ HTTP เช่น wgetแต่คุณต้องนำเอาท์พุททั้งหมดจากโปรแกรมไปยังที่อื่นเช่นไฟล์หรือ / dev / null มิฉะนั้นกระบวนการ PHP จะรอผลลัพธ์นั้น .

หากคุณต้องการแยกกระบวนการออกจากเธรด apache ทั้งหมดลองทำสิ่งที่ชอบ (ฉันไม่แน่ใจเกี่ยวกับสิ่งนี้ แต่ฉันหวังว่าคุณจะได้รับแนวคิด):

exec('bash -c "wget -O (url goes here) > /dev/null 2>&1 &"');

ไม่ใช่ธุรกิจที่ดีและคุณอาจต้องการงาน cron ที่เรียกใช้สคริปต์ heartbeat ซึ่งโพลคิวเหตุการณ์ฐานข้อมูลจริงเพื่อทำเหตุการณ์อะซิงโครนัสจริง


3
ฉันได้ทำสิ่งต่อไปนี้เช่นกัน: exec ("curl $ url> / dev / null &");
Matt Huggins

2
คำถาม: มีประโยชน์ในการโทร 'bash -c "wget"' แทนที่จะเป็น 'wget' หรือไม่
Matt Huggins

2
ในการทดสอบของฉันการใช้exec("curl $url > /dev/null 2>&1 &");เป็นหนึ่งในวิธีแก้ปัญหาที่เร็วที่สุดที่นี่ มันเร็วกว่าอย่างมาก (1.9 วินาทีสำหรับ 100 รอบ) กว่าpost_without_wait()ฟังก์ชั่น (14.8 วินาที) ในคำตอบ "ยอมรับ" ข้างต้น และมันเป็นสายการบินเดียว ...
rinogo

ใช้เส้นทางแบบเต็ม (เช่น / usr / bin / curl) เพื่อทำให้เร็วยิ่งขึ้น
Putnik

สิ่งนี้รอจนกว่าสคริปต์จะเสร็จสิ้นหรือไม่
cikatomo

11

ตั้งแต่ปีพ. ศ. 2561 Guzzleได้กลายเป็นห้องสมุดมาตรฐาน defacto สำหรับคำขอ HTTP ซึ่งใช้ในกรอบงานที่ทันสมัยหลายอย่าง มันเขียนใน PHP บริสุทธิ์และไม่จำเป็นต้องติดตั้งส่วนขยายที่กำหนดเองใด ๆ

มันสามารถทำการเรียก HTTP แบบอะซิงโครนัสได้อย่างดีและยังสามารถรวมพวกมันได้เช่นเมื่อคุณต้องการทำการโทร HTTP 100 ครั้ง แต่ไม่ต้องการเรียกใช้มากกว่า 5 ครั้ง

ตัวอย่างคำขอพร้อมกัน

use GuzzleHttp\Client;
use GuzzleHttp\Promise;

$client = new Client(['base_uri' => 'http://httpbin.org/']);

// Initiate each request but do not block
$promises = [
    'image' => $client->getAsync('/image'),
    'png'   => $client->getAsync('/image/png'),
    'jpeg'  => $client->getAsync('/image/jpeg'),
    'webp'  => $client->getAsync('/image/webp')
];

// Wait on all of the requests to complete. Throws a ConnectException
// if any of the requests fail
$results = Promise\unwrap($promises);

// Wait for the requests to complete, even if some of them fail
$results = Promise\settle($promises)->wait();

// You can access each result using the key provided to the unwrap
// function.
echo $results['image']['value']->getHeader('Content-Length')[0]
echo $results['png']['value']->getHeader('Content-Length')[0]

ดูhttp://docs.guzzlephp.org/en/stable/quickstart.html#concurrent-requests


3
อย่างไรก็ตามคำตอบนี้ไม่ได้เป็นแบบอะซิงโครนัส เห็นได้ชัดว่าผู้
ดื่มสุรา

2
Guzzle คุณต้องติดตั้ง curl ไม่อย่างนั้นมันจะไม่ขนานกันและมันจะไม่เตือนคุณว่ามันไม่ขนานกัน
Velizar Hristov

ขอบคุณสำหรับลิงก์ @daslicious - ใช่ดูเหมือนว่าจะไม่สมบูรณ์แบบ async (เช่นเมื่อคุณต้องการส่งคำขอ แต่ไม่สนใจผลลัพธ์) แต่มีการโพสต์ข้อความสองสามข้อความในหัวข้อที่ผู้ใช้เสนอวิธีแก้ปัญหาโดย การตั้งค่าการร้องขอการหมดเวลาที่ต่ำมากซึ่งยังคงอนุญาตเวลาการเชื่อมต่อ แต่ไม่รอผล
Simon East

9
/**
 * Asynchronously execute/include a PHP file. Does not record the output of the file anywhere. 
 *
 * @param string $filename              file to execute, relative to calling script
 * @param string $options               (optional) arguments to pass to file via the command line
 */ 
function asyncInclude($filename, $options = '') {
    exec("/path/to/php -f {$filename} {$options} >> /dev/null &");
}

สิ่งนี้ไม่เหมือนกันเนื่องจาก exec กำลังบล็อกจนกว่าคุณจะออกจากหรือแยกกระบวนการที่คุณต้องการเรียกใช้
Daniel W.

6
คุณสังเกตเห็น&ตอนท้ายหรือไม่?
philfreo

ดังนั้นบล็อกนี้จะสคริปต์แล้วหรือไม่ฉันสับสน?
pleshy

1
@pleshy มันจะไม่ เครื่องหมาย & (&) หมายถึงเรียกใช้สคริปต์ในพื้นหลัง
daisura99

8

คุณสามารถใช้ห้องสมุดนี้: https://github.com/stil/curl-easy

มันค่อนข้างตรงไปตรงมาแล้ว:

<?php
$request = new cURL\Request('http://yahoo.com/');
$request->getOptions()->set(CURLOPT_RETURNTRANSFER, true);

// Specify function to be called when your request is complete
$request->addListener('complete', function (cURL\Event $event) {
    $response = $event->response;
    $httpCode = $response->getInfo(CURLINFO_HTTP_CODE);
    $html = $response->getContent();
    echo "\nDone.\n";
});

// Loop below will run as long as request is processed
$timeStart = microtime(true);
while ($request->socketPerform()) {
    printf("Running time: %dms    \r", (microtime(true) - $timeStart)*1000);
    // Here you can do anything else, while your request is in progress
}

ด้านล่างคุณสามารถดูเอาต์พุตคอนโซลจากตัวอย่างด้านบน มันจะแสดงนาฬิกาสดที่เรียบง่ายที่บ่งบอกว่ามีการเรียกใช้เวลาเท่าไร:


ภาพเคลื่อนไหว


นี่ควรเป็นคำตอบที่ได้รับการยอมรับเพราะแม้ว่ามันจะไม่เป็น async จริงมันก็ยังดีกว่าคำตอบที่ได้รับการยอมรับและ "async" ทั้งหมดที่มี guzzle (ที่นี่คุณสามารถดำเนินการได้ในขณะที่มีการร้องขอ)
0ddlyoko

7
  1. ปลอมคำขอทำแท้งโดยใช้CURLการตั้งค่าต่ำCURLOPT_TIMEOUT_MS

  2. ตั้งค่าignore_user_abort(true)เพื่อให้การประมวลผลหลังจากการเชื่อมต่อปิด

ด้วยวิธีนี้ไม่จำเป็นต้องใช้การจัดการการเชื่อมต่อผ่านส่วนหัวและบัฟเฟอร์ด้วยเช่นกันขึ้นอยู่กับระบบปฏิบัติการ, เบราว์เซอร์และเวอร์ชั่น PHP

กระบวนการหลัก

function async_curl($background_process=''){

    //-------------get curl contents----------------

    $ch = curl_init($background_process);
    curl_setopt_array($ch, array(
        CURLOPT_HEADER => 0,
        CURLOPT_RETURNTRANSFER =>true,
        CURLOPT_NOSIGNAL => 1, //to timeout immediately if the value is < 1000 ms
        CURLOPT_TIMEOUT_MS => 50, //The maximum number of mseconds to allow cURL functions to execute
        CURLOPT_VERBOSE => 1,
        CURLOPT_HEADER => 1
    ));
    $out = curl_exec($ch);

    //-------------parse curl contents----------------

    //$header_size = curl_getinfo($ch, CURLINFO_HEADER_SIZE);
    //$header = substr($out, 0, $header_size);
    //$body = substr($out, $header_size);

    curl_close($ch);

    return true;
}

async_curl('http://example.com/background_process_1.php');

กระบวนการพื้นหลัง

ignore_user_abort(true);

//do something...

NB

หากคุณต้องการให้หมดเวลา cURL ในเวลาน้อยกว่าหนึ่งวินาทีคุณสามารถใช้ CURLOPT_TIMEOUT_MS แม้ว่าจะมีข้อผิดพลาด / "คุณสมบัติ" ใน "ระบบ Unix-like" ที่ทำให้ libcurl หมดเวลาทันทีหากค่าเป็น <1000 ms ด้วยข้อผิดพลาด " ข้อผิดพลาด cURL (28): ถึงเวลาหมดแล้ว " คำอธิบายสำหรับพฤติกรรมนี้คือ:

[ ... ]

วิธีแก้ไขคือปิดใช้งานสัญญาณโดยใช้ CURLOPT_NOSIGNAL

ทรัพยากร


คุณจัดการกับการหมดเวลาเชื่อมต่อ (แก้ไข, DNS) ได้อย่างไร? เมื่อฉันตั้งค่า timeout_ms เป็น 1 ฉันมักจะจบด้วย "การแก้ไขการหมดเวลาหลังจาก 4 ms" หรืออะไรทำนองนั้น
Martin Wickman

ฉันไม่รู้ แต่ 4 ms ฟังแล้วค่อนข้างเร็วสำหรับฉัน ... ฉันไม่คิดว่าคุณจะสามารถแก้ไขได้เร็วขึ้นโดยเปลี่ยนการตั้งค่า curl ใด ๆ ลองเพิ่มประสิทธิภาพคำขอที่เป็นเป้าหมายบางที ...
RafaSashi

ตกลง แต่ timeout_ms = 1 ตั้งค่าการหมดเวลาสำหรับคำขอทั้งหมด ดังนั้นหากการแก้ปัญหาของคุณใช้เวลามากกว่า 1 มิลลิวินาทีแล้ว curl จะหมดเวลาและหยุดการร้องขอ ฉันไม่เห็นว่าสิ่งนี้สามารถทำงานได้ทั้งหมด (สมมติว่าการแก้ไขใช้เวลา> 1 ms)
Martin Wickman

4

ให้ฉันแสดงวิธีของฉัน :)

ต้องการ nodejs ติดตั้งบนเซิร์ฟเวอร์

(เซิร์ฟเวอร์ของฉันส่งคำขอรับ 1,000 https ใช้เวลาเพียง 2 วินาที)

ur.php:

<?
$urls = array_fill(0, 100, 'http://google.com/blank.html');

function execinbackground($cmd) { 
    if (substr(php_uname(), 0, 7) == "Windows"){ 
        pclose(popen("start /B ". $cmd, "r"));  
    } 
    else { 
        exec($cmd . " > /dev/null &");   
    } 
} 
fwite(fopen("urls.txt","w"),implode("\n",$urls);
execinbackground("nodejs urlscript.js urls.txt");
// { do your work while get requests being executed.. }
?>

urlscript.js>

var https = require('https');
var url = require('url');
var http = require('http');
var fs = require('fs');
var dosya = process.argv[2];
var logdosya = 'log.txt';
var count=0;
http.globalAgent.maxSockets = 300;
https.globalAgent.maxSockets = 300;

setTimeout(timeout,100000); // maximum execution time (in ms)

function trim(string) {
    return string.replace(/^\s*|\s*$/g, '')
}

fs.readFile(process.argv[2], 'utf8', function (err, data) {
    if (err) {
        throw err;
    }
    parcala(data);
});

function parcala(data) {
    var data = data.split("\n");
    count=''+data.length+'-'+data[1];
    data.forEach(function (d) {
        req(trim(d));
    });
    /*
    fs.unlink(dosya, function d() {
        console.log('<%s> file deleted', dosya);
    });
    */
}


function req(link) {
    var linkinfo = url.parse(link);
    if (linkinfo.protocol == 'https:') {
        var options = {
        host: linkinfo.host,
        port: 443,
        path: linkinfo.path,
        method: 'GET'
    };
https.get(options, function(res) {res.on('data', function(d) {});}).on('error', function(e) {console.error(e);});
    } else {
    var options = {
        host: linkinfo.host,
        port: 80,
        path: linkinfo.path,
        method: 'GET'
    };        
http.get(options, function(res) {res.on('data', function(d) {});}).on('error', function(e) {console.error(e);});
    }
}


process.on('exit', onExit);

function onExit() {
    log();
}

function timeout()
{
console.log("i am too far gone");process.exit();
}

function log() 
{
    var fd = fs.openSync(logdosya, 'a+');
    fs.writeSync(fd, dosya + '-'+count+'\n');
    fs.closeSync(fd);
}

1
โปรดทราบว่าผู้ให้บริการโฮสติ้งหลายแห่งไม่อนุญาตให้ใช้ฟังก์ชัน PHP บางอย่าง (เช่นpopen / exec ) ดู disable_functions คำสั่ง PHP
Eugen Mihailescu

4

นามสกุล swoole https://github.com/matyhtf/swoole เฟรมเวิร์กเครือข่ายแบบอะซิงโครนัสและพร้อมกันสำหรับ PHP

$client = new swoole_client(SWOOLE_SOCK_TCP, SWOOLE_SOCK_ASYNC);

$client->on("connect", function($cli) {
    $cli->send("hello world\n");
});

$client->on("receive", function($cli, $data){
    echo "Receive: $data\n";
});

$client->on("error", function($cli){
    echo "connect fail\n";
});

$client->on("close", function($cli){
    echo "close\n";
});

$client->connect('127.0.0.1', 9501, 0.5);

4

คุณสามารถใช้ซ็อกเก็ตที่ไม่ปิดกั้นและหนึ่งในส่วนขยาย pecl สำหรับ PHP:

คุณสามารถใช้ไลบรารีที่ให้เลเยอร์นามธรรมระหว่างรหัสของคุณกับส่วนขยาย pecl: https://github.com/reactphp/event-loop

คุณยังสามารถใช้ async http- ไคลเอนต์ตามไลบรารีก่อนหน้านี้: https://github.com/reactphp/http-client

ดูห้องสมุดของ ReactPHP อื่น ๆ : http://reactphp.org

ระวังด้วยโมเดลอะซิงโครนัส ฉันแนะนำให้ดูวิดีโอนี้ใน youtube: http://www.youtube.com/watch?v=MWNcItWuKpI


3
class async_file_get_contents extends Thread{
    public $ret;
    public $url;
    public $finished;
        public function __construct($url) {
        $this->finished=false;
        $this->url=$url;
    }
        public function run() {
        $this->ret=file_get_contents($this->url);
        $this->finished=true;
    }
}
$afgc=new async_file_get_contents("http://example.org/file.ext");

2

ส่วนขยายของเหตุการณ์

การขยายกิจกรรมมีความเหมาะสมมาก เป็นพอร์ตของไลบรารีLibeventซึ่งออกแบบมาสำหรับ I / O ที่ขับเคลื่อนด้วยเหตุการณ์ส่วนใหญ่ใช้สำหรับการเชื่อมต่อเครือข่าย

ฉันได้เขียนไคลเอนต์ HTTP ตัวอย่างที่อนุญาตให้กำหนดเวลาคำขอ HTTP จำนวนมากและเรียกใช้แบบอะซิงโครนัส

นี่เป็นคลาสไคลเอ็นต์ HTTP ตัวอย่างตามส่วนขยายของเหตุการณ์

คลาสอนุญาตให้กำหนดเวลาคำขอ HTTP จำนวนมากจากนั้นเรียกใช้แบบอะซิงโครนัส

http-client.php

<?php
class MyHttpClient {
  /// @var EventBase
  protected $base;
  /// @var array Instances of EventHttpConnection
  protected $connections = [];

  public function __construct() {
    $this->base = new EventBase();
  }

  /**
   * Dispatches all pending requests (events)
   *
   * @return void
   */
  public function run() {
    $this->base->dispatch();
  }

  public function __destruct() {
    // Destroy connection objects explicitly, don't wait for GC.
    // Otherwise, EventBase may be free'd earlier.
    $this->connections = null;
  }

  /**
   * @brief Adds a pending HTTP request
   *
   * @param string $address Hostname, or IP
   * @param int $port Port number
   * @param array $headers Extra HTTP headers
   * @param int $cmd A EventHttpRequest::CMD_* constant
   * @param string $resource HTTP request resource, e.g. '/page?a=b&c=d'
   *
   * @return EventHttpRequest|false
   */
  public function addRequest($address, $port, array $headers,
    $cmd = EventHttpRequest::CMD_GET, $resource = '/')
  {
    $conn = new EventHttpConnection($this->base, null, $address, $port);
    $conn->setTimeout(5);

    $req = new EventHttpRequest([$this, '_requestHandler'], $this->base);

    foreach ($headers as $k => $v) {
      $req->addHeader($k, $v, EventHttpRequest::OUTPUT_HEADER);
    }
    $req->addHeader('Host', $address, EventHttpRequest::OUTPUT_HEADER);
    $req->addHeader('Connection', 'close', EventHttpRequest::OUTPUT_HEADER);
    if ($conn->makeRequest($req, $cmd, $resource)) {
      $this->connections []= $conn;
      return $req;
    }

    return false;
  }


  /**
   * @brief Handles an HTTP request
   *
   * @param EventHttpRequest $req
   * @param mixed $unused
   *
   * @return void
   */
  public function _requestHandler($req, $unused) {
    if (is_null($req)) {
      echo "Timed out\n";
    } else {
      $response_code = $req->getResponseCode();

      if ($response_code == 0) {
        echo "Connection refused\n";
      } elseif ($response_code != 200) {
        echo "Unexpected response: $response_code\n";
      } else {
        echo "Success: $response_code\n";
        $buf = $req->getInputBuffer();
        echo "Body:\n";
        while ($s = $buf->readLine(EventBuffer::EOL_ANY)) {
          echo $s, PHP_EOL;
        }
      }
    }
  }
}


$address = "my-host.local";
$port = 80;
$headers = [ 'User-Agent' => 'My-User-Agent/1.0', ];

$client = new MyHttpClient();

// Add pending requests
for ($i = 0; $i < 10; $i++) {
  $client->addRequest($address, $port, $headers,
    EventHttpRequest::CMD_GET, '/test.php?a=' . $i);
}

// Dispatch pending requests
$client->run();

test.php

นี่เป็นสคริปต์ตัวอย่างทางฝั่งเซิร์ฟเวอร์

<?php
echo 'GET: ', var_export($_GET, true), PHP_EOL;
echo 'User-Agent: ', $_SERVER['HTTP_USER_AGENT'] ?? '(none)', PHP_EOL;

การใช้

php http-client.php

ตัวอย่างผลลัพธ์

Success: 200
Body:
GET: array (
  'a' => '1',
)
User-Agent: My-User-Agent/1.0
Success: 200
Body:
GET: array (
  'a' => '0',
)
User-Agent: My-User-Agent/1.0
Success: 200
Body:
GET: array (
  'a' => '3',
)
...

(ตัด).

หมายเหตุรหัสถูกออกแบบมาสำหรับการประมวลผลระยะยาวในSAPI CLI


สำหรับโปรโตคอลที่กำหนดเองพิจารณาใช้ระดับต่ำ API คือbuffer เหตุการณ์ , บัฟเฟอร์ สำหรับการสื่อสาร SSL / TLS ผมจะแนะนำให้ระดับต่ำ API ร่วมกับกิจกรรมของบริบท SSL ตัวอย่าง:


แม้ว่า HTTP API ของ Libevent นั้นเรียบง่าย แต่ก็ไม่ยืดหยุ่นเท่ากับเหตุการณ์บัฟเฟอร์ ตัวอย่างเช่น HTTP API ปัจจุบันไม่สนับสนุนวิธี HTTP แบบกำหนดเอง แต่เป็นไปได้ที่จะติดตั้งโปรโตคอลใด ๆ โดยใช้ API ระดับต่ำ

ส่วนต่อขยาย Ev

ฉันยังได้เขียนตัวอย่างของลูกค้า HTTP อื่นใช้Evขยายกับซ็อกเก็ตในnon-blocking โหมด รหัสมีความละเอียดมากกว่าตัวอย่างเล็กน้อยตามเหตุการณ์เนื่องจาก Ev เป็นเหตุการณ์วนรอบวัตถุประสงค์ทั่วไป มันไม่ได้มีฟังก์ชั่นเฉพาะเครือข่าย แต่EvIoผู้เฝ้าดูสามารถฟังไฟล์ descriptor ที่ถูกห่อหุ้มเข้าไปในทรัพยากรซ็อกเก็ตโดยเฉพาะ

นี่เป็นตัวอย่างไคลเอ็นต์ HTTP ที่อ้างอิงตามส่วนขยายEv

ส่วนขยาย Ev ใช้ห่วงเหตุการณ์วัตถุประสงค์ทั่วไปที่เรียบง่ายและมีประสิทธิภาพ มันไม่ได้ให้ดูเฉพาะเครือข่าย แต่I / O เฝ้าสามารถนำมาใช้สำหรับการประมวลผลไม่ตรงกันของซ็อกเก็ต

รหัสต่อไปนี้แสดงวิธีที่คำขอ HTTP สามารถกำหนดเวลาสำหรับการประมวลผลแบบขนาน

http-client.php

<?php
class MyHttpRequest {
  /// @var MyHttpClient
  private $http_client;
  /// @var string
  private $address;
  /// @var string HTTP resource such as /page?get=param
  private $resource;
  /// @var string HTTP method such as GET, POST etc.
  private $method;
  /// @var int
  private $service_port;
  /// @var resource Socket
  private $socket;
  /// @var double Connection timeout in seconds.
  private $timeout = 10.;
  /// @var int Chunk size in bytes for socket_recv()
  private $chunk_size = 20;
  /// @var EvTimer
  private $timeout_watcher;
  /// @var EvIo
  private $write_watcher;
  /// @var EvIo
  private $read_watcher;
  /// @var EvTimer
  private $conn_watcher;
  /// @var string buffer for incoming data
  private $buffer;
  /// @var array errors reported by sockets extension in non-blocking mode.
  private static $e_nonblocking = [
    11, // EAGAIN or EWOULDBLOCK
    115, // EINPROGRESS
  ];

  /**
   * @param MyHttpClient $client
   * @param string $host Hostname, e.g. google.co.uk
   * @param string $resource HTTP resource, e.g. /page?a=b&c=d
   * @param string $method HTTP method: GET, HEAD, POST, PUT etc.
   * @throws RuntimeException
   */
  public function __construct(MyHttpClient $client, $host, $resource, $method) {
    $this->http_client = $client;
    $this->host        = $host;
    $this->resource    = $resource;
    $this->method      = $method;

    // Get the port for the WWW service
    $this->service_port = getservbyname('www', 'tcp');

    // Get the IP address for the target host
    $this->address = gethostbyname($this->host);

    // Create a TCP/IP socket
    $this->socket = socket_create(AF_INET, SOCK_STREAM, SOL_TCP);
    if (!$this->socket) {
      throw new RuntimeException("socket_create() failed: reason: " .
        socket_strerror(socket_last_error()));
    }

    // Set O_NONBLOCK flag
    socket_set_nonblock($this->socket);

    $this->conn_watcher = $this->http_client->getLoop()
      ->timer(0, 0., [$this, 'connect']);
  }

  public function __destruct() {
    $this->close();
  }

  private function freeWatcher(&$w) {
    if ($w) {
      $w->stop();
      $w = null;
    }
  }

  /**
   * Deallocates all resources of the request
   */
  private function close() {
    if ($this->socket) {
      socket_close($this->socket);
      $this->socket = null;
    }

    $this->freeWatcher($this->timeout_watcher);
    $this->freeWatcher($this->read_watcher);
    $this->freeWatcher($this->write_watcher);
    $this->freeWatcher($this->conn_watcher);
  }

  /**
   * Initializes a connection on socket
   * @return bool
   */
  public function connect() {
    $loop = $this->http_client->getLoop();

    $this->timeout_watcher = $loop->timer($this->timeout, 0., [$this, '_onTimeout']);
    $this->write_watcher = $loop->io($this->socket, Ev::WRITE, [$this, '_onWritable']);

    return socket_connect($this->socket, $this->address, $this->service_port);
  }

  /**
   * Callback for timeout (EvTimer) watcher
   */
  public function _onTimeout(EvTimer $w) {
    $w->stop();
    $this->close();
  }

  /**
   * Callback which is called when the socket becomes wriable
   */
  public function _onWritable(EvIo $w) {
    $this->timeout_watcher->stop();
    $w->stop();

    $in = implode("\r\n", [
      "{$this->method} {$this->resource} HTTP/1.1",
      "Host: {$this->host}",
      'Connection: Close',
    ]) . "\r\n\r\n";

    if (!socket_write($this->socket, $in, strlen($in))) {
      trigger_error("Failed writing $in to socket", E_USER_ERROR);
      return;
    }

    $loop = $this->http_client->getLoop();
    $this->read_watcher = $loop->io($this->socket,
      Ev::READ, [$this, '_onReadable']);

    // Continue running the loop
    $loop->run();
  }

  /**
   * Callback which is called when the socket becomes readable
   */
  public function _onReadable(EvIo $w) {
    // recv() 20 bytes in non-blocking mode
    $ret = socket_recv($this->socket, $out, 20, MSG_DONTWAIT);

    if ($ret) {
      // Still have data to read. Append the read chunk to the buffer.
      $this->buffer .= $out;
    } elseif ($ret === 0) {
      // All is read
      printf("\n<<<<\n%s\n>>>>", rtrim($this->buffer));
      fflush(STDOUT);
      $w->stop();
      $this->close();
      return;
    }

    // Caught EINPROGRESS, EAGAIN, or EWOULDBLOCK
    if (in_array(socket_last_error(), static::$e_nonblocking)) {
      return;
    }

    $w->stop();
    $this->close();
  }
}

/////////////////////////////////////
class MyHttpClient {
  /// @var array Instances of MyHttpRequest
  private $requests = [];
  /// @var EvLoop
  private $loop;

  public function __construct() {
    // Each HTTP client runs its own event loop
    $this->loop = new EvLoop();
  }

  public function __destruct() {
    $this->loop->stop();
  }

  /**
   * @return EvLoop
   */
  public function getLoop() {
    return $this->loop;
  }

  /**
   * Adds a pending request
   */
  public function addRequest(MyHttpRequest $r) {
    $this->requests []= $r;
  }

  /**
   * Dispatches all pending requests
   */
  public function run() {
    $this->loop->run();
  }
}


/////////////////////////////////////
// Usage
$client = new MyHttpClient();
foreach (range(1, 10) as $i) {
  $client->addRequest(new MyHttpRequest($client, 'my-host.local', '/test.php?a=' . $i, 'GET'));
}
$client->run();

การทดสอบ

สมมติว่าhttp://my-host.local/test.phpสคริปต์กำลังพิมพ์ดัมพ์ของ$_GET:

<?php
echo 'GET: ', var_export($_GET, true), PHP_EOL;

จากนั้นเอาต์พุตของphp http-client.phpคำสั่งจะคล้ายกับที่แสดงต่อไปนี้:

<<<<
HTTP/1.1 200 OK
Server: nginx/1.10.1
Date: Fri, 02 Dec 2016 12:39:54 GMT
Content-Type: text/html; charset=UTF-8
Transfer-Encoding: chunked
Connection: close
X-Powered-By: PHP/7.0.13-pl0-gentoo

1d
GET: array (
  'a' => '3',
)

0
>>>>
<<<<
HTTP/1.1 200 OK
Server: nginx/1.10.1
Date: Fri, 02 Dec 2016 12:39:54 GMT
Content-Type: text/html; charset=UTF-8
Transfer-Encoding: chunked
Connection: close
X-Powered-By: PHP/7.0.13-pl0-gentoo

1d
GET: array (
  'a' => '2',
)

0
>>>>
...

(ตัดแต่ง)

หมายเหตุใน PHP 5 ซ็อกเก็ตนามสกุลสามารถเข้าสู่ระบบการเตือนสำหรับEINPROGRESS, EAGAINและEWOULDBLOCK errnoค่า เป็นไปได้ที่จะปิดการบันทึกด้วย

error_reporting(E_ERROR);

เกี่ยวกับ "ส่วนที่เหลือ" ของรหัส

ฉันต้องการทำสิ่งที่ชอบfile_get_contents()แต่ไม่ต้องรอให้คำขอเสร็จสิ้นก่อนดำเนินการส่วนที่เหลือของรหัสของฉัน

รหัสที่ควรจะทำงานควบคู่กับคำขอเครือข่ายสามารถดำเนินการภายในการเรียกกลับของ จับเวลาเหตุการณ์หรือ Ev ของพิทักษ์ไม่ได้ใช้งานเช่น คุณสามารถคิดออกโดยดูตัวอย่างที่กล่าวข้างต้น มิฉะนั้นฉันจะเพิ่มตัวอย่างอีก :)


1

นี่คือตัวอย่างการใช้งานเพียงแค่เรียกใช้และเปิด storage.txt หลังจากนั้นเพื่อตรวจสอบผลลัพธ์ที่น่าอัศจรรย์

<?php
    function curlGet($target){
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $target);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        $result = curl_exec ($ch);
        curl_close ($ch);
        return $result;
    }

    // Its the next 3 lines that do the magic
    ignore_user_abort(true);
    header("Connection: close"); header("Content-Length: 0");
    echo str_repeat("s", 100000); flush();

    $i = $_GET['i'];
    if(!is_numeric($i)) $i = 1;
    if($i > 4) exit;
    if($i == 1) file_put_contents('storage.txt', '');

    file_put_contents('storage.txt', file_get_contents('storage.txt') . time() . "\n");

    sleep(5);
    curlGet($_SERVER['HTTP_HOST'] . $_SERVER['SCRIPT_NAME'] . '?i=' . ($i + 1));
    curlGet($_SERVER['HTTP_HOST'] . $_SERVER['SCRIPT_NAME'] . '?i=' . ($i + 1));

1

นี่คือฟังก์ชั่น PHP ของฉันเองเมื่อฉันโพสต์ไปยัง URL เฉพาะของหน้าใด ๆ .... ตัวอย่าง: *** การใช้งานฟังก์ชั่นของฉัน ...

    <?php
        parse_str("email=myemail@ehehehahaha.com&subject=this is just a test");
        $_POST['email']=$email;
        $_POST['subject']=$subject;
        echo HTTP_POST("http://example.com/mail.php",$_POST);***

    exit;
    ?>
    <?php
    /*********HTTP POST using FSOCKOPEN **************/
    // by ArbZ

function HTTP_Post($URL,$data, $referrer="") {

    // parsing the given URL
    $URL_Info=parse_url($URL);

    // Building referrer
    if($referrer=="") // if not given use this script as referrer
        $referrer=$_SERVER["SCRIPT_URI"];

    // making string from $data
    foreach($data as $key=>$value)
        $values[]="$key=".urlencode($value);
        $data_string=implode("&",$values);

    // Find out which port is needed - if not given use standard (=80)
    if(!isset($URL_Info["port"]))
        $URL_Info["port"]=80;

    // building POST-request: HTTP_HEADERs
    $request.="POST ".$URL_Info["path"]." HTTP/1.1\n";
    $request.="Host: ".$URL_Info["host"]."\n";
    $request.="Referer: $referer\n";
    $request.="Content-type: application/x-www-form-urlencoded\n";
    $request.="Content-length: ".strlen($data_string)."\n";
    $request.="Connection: close\n";
    $request.="\n";
    $request.=$data_string."\n";

    $fp = fsockopen($URL_Info["host"],$URL_Info["port"]);
    fputs($fp, $request);
    while(!feof($fp)) {
        $result .= fgets($fp, 128);
    }
    fclose($fp); //$eco = nl2br();


    function getTextBetweenTags($string, $tagname) {
        $pattern = "/<$tagname ?.*>(.*)<\/$tagname>/";
        preg_match($pattern, $string, $matches);
        return $matches[1];
    }
    //STORE THE FETCHED CONTENTS to a VARIABLE, because its way better and fast...
    $str = $result;
    $txt = getTextBetweenTags($str, "span"); $eco = $txt;  $result = explode("&",$result);
    return $result[1];
    <span style=background-color:LightYellow;color:blue>".trim($_GET['em'])."</span>
    </pre> "; 
}
</pre>

1

ReactPHP async http ไคลเอ็นต์
https://github.com/shuchkin/react-http-client

ติดตั้งผ่านผู้เรียบเรียง

$ composer require shuchkin/react-http-client

Async HTTP GET

// get.php
$loop = \React\EventLoop\Factory::create();

$http = new \Shuchkin\ReactHTTP\Client( $loop );

$http->get( 'https://tools.ietf.org/rfc/rfc2068.txt' )->then(
    function( $content ) {
        echo $content;
    },
    function ( \Exception $ex ) {
        echo 'HTTP error '.$ex->getCode().' '.$ex->getMessage();
    }
);

$loop->run();

เรียกใช้ php ในโหมด CLI

$ php get.php

0

ฉันพบว่าแพคเกจนี้มีประโยชน์มากและใช้งานง่ายมาก: https://github.com/amphp/parallel-functions

<?php

use function Amp\ParallelFunctions\parallelMap;
use function Amp\Promise\wait;

$responses = wait(parallelMap([
    'https://google.com/',
    'https://github.com/',
    'https://stackoverflow.com/',
], function ($url) {
    return file_get_contents($url);
}));

มันจะโหลดทั้ง 3 URL ขนาน นอกจากนี้คุณยังสามารถใช้วิธีการเรียนอินสแตนซ์ในการปิด

ตัวอย่างเช่นฉันใช้นามสกุล Laravel โดยยึดตามแพคเกจนี้https://github.com/spatie/laravel-collection-macros#parallelmap

นี่คือรหัสของฉัน:

    /**
     * Get domains with all needed data
     */
    protected function getDomainsWithdata(): Collection
    {
        return $this->opensrs->getDomains()->parallelMap(function ($domain) {
            $contact = $this->opensrs->getDomainContact($domain);
            $contact['domain'] = $domain;
            return $contact;
        }, 10);
    }

มันโหลดข้อมูลที่จำเป็นทั้งหมดใน 10 เธรดแบบขนานและแทนที่จะเป็น 50 วินาทีโดยไม่ต้องซิงค์มันเสร็จในเวลาเพียง 8 วินาที


0

Symfony HttpClient เป็นแบบอะซิงโครนัสhttps://symfony.com/doc/current/components/http_client.html https://symfony.com/doc/current/components/http_client.html

ตัวอย่างเช่นคุณสามารถ

use Symfony\Component\HttpClient\HttpClient;

$client = HttpClient::create();
$response1 = $client->request('GET', 'https://website1');
$response2 = $client->request('GET', 'https://website1');
$response3 = $client->request('GET', 'https://website1');
//these 3 calls with return immediately
//but the requests will fire to the website1 webserver

$response1->getContent(); //this will block until content is fetched
$response2->getContent(); //same 
$response3->getContent(); //same

โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.