Как ускорить cURL в php?

Что касается среды, я заметил в PHP, что cURL обычно работает очень быстро в большинстве сред, за исключением мест, где низкий процессор и более низкая производительность сети. Например, на localhost в моей установке MAMP curl работает быстро, на более крупном экземпляре Amazon curl работает быстро. Но на небольшом дрянном хостинге я видел, что у него проблемы с производительностью, когда подключение заметно медленнее. Хотя я не совсем уверен, почему так медленнее. Кроме того, это точно не было на 5 секунд медленнее.

чтобы определить, является ли это PHP или ваша среда, вам следует попробовать взаимодействовать с curl через командную строку. По крайней мере, вы сможете исключить проблему с PHP-кодом, если это еще 5 секунд.

Лучшее ускорение, которое у меня когда-либо было, - это повторное использование одной и той же ручки для завивки. Замените $ch = curl_init( $json_url ); на curl_setopt($ch, CURLOPT_URL, $url);. Тогда вне функций есть один $ch = curl_init();. Вам нужно сделать $ch глобальным в функциях для доступа к нему.

Повторное использование дескриптора curl сохраняет соединение с сервером открытым. Это работает, только если сервер между запросами такой же, как и ваш.

Окончательное решение для ускорения - это

curl_setopt($ch, CURLOPT_IPRESOLVE, CURL_IPRESOLVE_V4 );

С Уважением

Попробуйте установить curl_setopt($ch, CURLOPT_ENCODING, '') это включить сжатие gzip

Чтобы ускорить cURL, я рекомендую создать специальный класс для API (например, ApiClient) и использовать один общий обработчик cURL, изменяя только URL для каждого запроса. Также отключите запросы на разрешение имен и используйте gzip-ответ.

Мне нужно было обрабатывать около 1 миллиона сущностей каждый день с одного API-сервера, что ограничивает нас возможностью использовать только одно одновременное соединение. Я создал этот класс. Я надеюсь, что это поможет другим в оптимизации их запросов на завитки.

class ApiClient
{
    const CURL_TIMEOUT = 3600;
    const CONNECT_TIMEOUT = 30;
    const HOST = 'api.example.com';
    const API_TOKEN = 'token';

    /** @var resource CURL handler. Reused every time for optimization purposes */
    private $ch;
    /** @var string URL for API. Calculated at creating object for optimization purposes */
    private $url;

    public function __construct()
    {
        $this->url = 'https://' . self::HOST . '/v1/entity/view?token=' . self::API_TOKEN . '&id=';
                                // Micro-optimization: every concat operation takes several milliseconds
                                // But for millions sequential requests it can save a few seconds
        $host = [implode(':', [ // $host stores information for domain names resolving (like /etc/hosts file)
            self::HOST, // Host that will be stored in our "DNS-cache"
            443, // Default port for HTTPS, can be 80 for HTTP
            gethostbyname(self::HOST), // IPv4-address where to point our domain name (Host)
        ])];
        $this->ch = curl_init();
        curl_setopt($this->ch, CURLOPT_ENCODING, '');  // This will use server's gzip (compress data)
                                                       // Depends on server. On some servers can not work
        curl_setopt($this->ch, CURLOPT_RESOLVE, $host); // This will cut all requests for domain name resolving
        curl_setopt($this->ch, CURLOPT_TIMEOUT, self::CURL_TIMEOUT); // To not wait extra time if we know
                                                            // that api-call cannot be longer than CURL_TIMEOUT
        curl_setopt($this->ch, CURLOPT_CONNECTTIMEOUT, self::CONNECT_TIMEOUT); // Close connection if server doesn't response after CONNECT_TIMEOUT
        curl_setopt($this->ch, CURLOPT_RETURNTRANSFER, true); // To return output in `curl_exec`
    }

    /** @throws \Exception */
    public function requestEntity($id)
    {
        $url = $this->url . $id;

        curl_setopt($this->ch, CURLOPT_URL, $url);

        $data = curl_exec($this->ch);

        if (curl_error($this->ch)) {
            throw new \Exception('cURL error (' . curl_errno($this->ch) . '): ' . curl_error($this->ch));
        }

        return $data;
    }

    public function __destruct()
    {
        curl_close($this->ch);
    }
}

Также, если у вас нет ограничений на одно соединение с сервером, вы можете использовать curl_multi_* функции.

Пытаться

CURLOPT_TCP_FASTOPEN => 1

... для активации TCP-Fast-Open.

Он был добавлен в cURL 7.49.0, добавлен в PHP 7.0.7.

Попробуйте использовать с параметром --ipv4.

Это заставит curl использовать только ipv-4 и игнорировать ipv-6, который все еще не очень совместим с некоторыми устройствами и замедляет процесс. Добавление --ipv4 в мою команду curl снизило затраты с 8 до 4 секунд. Что на 50% быстрее.