IRobot Скребковый инструмент

313

Я использую инструмент очистки IRobot для получения некоторых данных с веб-сайта, но по какой-то причине это не происходит. Я думаю, что проблема должна быть связана с настройками прокси-сервера, может кто-нибудь помочь мне с тем, как изменить настройки прокси-сервера инструмента очистки IRobot.

0
тег scrapy не относится к этому вопросу Pablo Hoffman 11 лет назад 0
Похоже, что это запрос инструкций по использованию части программного обеспечения, то есть не по теме. Проголосовал закрыть и перейти к суперпользователю. tomfanning 11 лет назад 0

1 ответ на вопрос

0

Вы можете изменить настройки прокси-сервера IE, и irobot будет использовать его.

Или вы можете вызвать SetProxyServer (ip, port, agentname) в роботе, чтобы изменить прокси во время выполнения. Если вы дадите имя агента, прокси будет влиять только на работающего робота.

В программном пакете есть пример робота «change_proxy.irb», показывающий, как случайным образом выбрать прокси из списка адресов в «proxy.txt». Вы можете скопировать задание на своего робота и регулярно вызывать его.

Похожие вопросы