时间戳

首页 > 解决方案 > 10K 次相同 URL 的 PHP CURL 请求

php - 10K 次相同 URL 的 PHP CURL 请求

问题描述

我有一个 Excel 文件大约。1,29 MB，它有 11500 行数据。

在我的 PHP 代码中，我首先读取整个文件并通过 PHPExcel/IOFactory 库放入数组。

放置后，在 foreach 循环中，我开始为 cUrl 创建 $postvars。

gonderi_referans=REF&alici=Sarah&alici_telefon=55544448885&alici_adres=Krg&alici_ulke=DE

在 foreach 循环中，代码将创建 11500 次 $postvars 并发出 curl 请求。

    $url = "https://$_SERVER[HTTP_HOST]/api572.php";
    $ch = curl_init();
    curl_setopt($ch,CURLOPT_URL,$url);
    curl_setopt($ch,CURLOPT_POST, 1);          
    curl_setopt($ch,CURLOPT_POSTFIELDS,$postvars);
    curl_setopt($ch,CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch,CURLOPT_CONNECTTIMEOUT ,30);
    curl_setopt($ch,CURLOPT_TIMEOUT, 20);
    $response =json_decode(curl_exec($ch), true);

此操作大约需要 5 分钟。我想以更快的方式做到这一点。我该怎么做？

代码在 10 秒内读取 excel 文件，curl 请求需要很多次。

标签： phpcurl

解决方案

尝试使用一些批处理来最小化发送请求的数量，完全是基本的 POC：

excel-reader.php：

    <?php

// Dummy data START
$dummyExcelRows = [];
for ($i = 0; $i <= 11500; $i++) {
    $dummyExcelRows[] = "gonderi_referans=REF&alici=Sarah&alici_telefon=55544448885&alici_adres=Krg&alici_ulke=DE&id=$i";
}
// Dummy data END

// Serialize multiple URI into one string START
$data = [];
foreach ($dummyExcelRows as $postvars) {
    $data[] = $postvars;
}
$dataToSend = ['payload' => json_encode($data)];
// Serialize multiple URI into one string END



$url = "http://$_SERVER[HTTP_HOST]/test/api572.php";
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, $dataToSend);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 30);
curl_setopt($ch, CURLOPT_TIMEOUT, 20);
//    $response =json_decode(curl_exec($ch), true);
$response = curl_exec($ch);

var_dump($response);

api572.php：

<?php

$decoded = json_decode($_POST['payload']);
foreach ($decoded as $row) {
    echo "Do something with $row <br/>";
    echo '<pre>';
    parse_str($row, $fakePost);
    print_r($fakePost);
    echo '</pre>';
}

推荐阅读