Можно ли настроить краулер Storm, чтобы он добавлял URL-адрес хоста в начало маршрута URL-адреса во время сканирования?

Я хочу сканировать такие URL-адреса, перед которыми нет хоста.

<div class=pro-info>
    <a href="/being-human-mens-solid-polo-t-shirt/p-202971521">
</div

Могу ли я добавить хост-часть URL-адреса перед этими URL-адресами, используя файл конфигурации в stormcrawler?

web-crawler stormcrawler

Sankar Prasanth Gadhamsetti 21.11.2017 источник

arrow_upward
0
arrow_downward

URL-адрес будет сделан абсолютным во время синтаксического анализа. Чтобы получить полные URL-адреса, не нужно делать ничего особенного.

Julien Nioche 21.11.2017