Получение чистого HTML/тегов

У меня есть cronjob, и я хочу периодически проверять один из своих сайтов на наличие определенного тега/класса, используя пулы guzzlehttp. Пока у меня есть следующий код:

    $oClient             = new Client(['expect' => false]);

    foreach ($aDomains as $iDomainKey => $oDomain) 
    {          
        array_push($aCreatedRequests, new Request('GET', $oDomain));
    }

    $pool = new Pool($oClient, $aCreatedRequests, 
    [
        'concurrency' => 50,
        'options' => ['timeout' => 10],
        'fulfilled'   => function ($response, $index) use (&$aAcceptedResponse) 
        {               
            $json = json_decode((string)$response->getBody()->getContents());
            
        },
        'rejected'    => function ($reason, $index) use(&$aRejectedResponses)  
        {
            $aRejectedResponses[] = $index;
        },
    ]);

    $promise = $pool->promise();
    $promise->wait();

это действительно дает мне HTML (но очень медленный), и кажется, что он просто зацикливается, а также загружает все дерьмовые библиотеки/фреймворки, которые у меня есть на моем сайте - и, как указано выше, я хочу/нужен ТОЛЬКО HTML, так что я могу использовать simple_html_dom, чтобы найти свой тег/класс.
Я прочитал часть документации по жратве (и это привело меня к этому моменту) - но, похоже, я не могу продвинуться дальше - и мои навыки Google ниндзя не получить меня дальше либо. поэтому я спрашиваю здесь; есть ли у них правильный способ сделать это?


php get guzzle guzzlehttp simple-html-dom
person Magnus V.    schedule 22.12.2020    source источник

Ответы (1)


arrow_upward
-1
arrow_downward

Итак, спустя довольно много времени, пытаясь решить эту проблему, я наткнулся на то, что работает

$oClient             = new Client(['expect' => false]);
$aAcceptedResponse   = [];
$aRejectedResponses  = []; 
foreach ($aDomains as $iDomainKey => $oDomain) 
{          
    array_push($aCreatedRequests, new Request('GET', $oDomain));
}

$pool = new Pool($oClient, $aCreatedRequests, 
[
    'concurrency' => 50,
    'options' => ['timeout' => 10],
    'fulfilled'   => function ($response, $index) use (&$aAcceptedResponse) 
    {               
        $aAcceptedResponse[$index] = $response->getBody()->getContents();
        // $json = json_decode((string)$response->getBody()->getContents());
        
    },
    'rejected'    => function ($reason, $index) use(&$aRejectedResponses)  
    {
        $aRejectedResponses[] = $index;
    },
]);

$promise = $pool->promise();
$promise->wait();

foreach($aAcceptedResponse as $iTest => $sHTLM)
{
    $simpleHTMLDom = str_get_html($sHTLM);
    echo '<pre>';
    print_r(count($simpleHTMLDom->find('.td-icon-star')));
    echo '</pre>';
}
person Magnus V.    schedule 23.12.2020