Вопросы по теме 'mechanize'
Как использовать Mechanize для обработки JavaScript?
Я подключаюсь к веб-сайту, вхожу в систему.
Веб-сайт перенаправляет меня на новые страницы, а Mechanize обрабатывает все файлы cookie и перенаправления, но я не могу получить последнюю страницу. Я использовал Firebug и снова проделал ту же работу...
44525 просмотров
schedule
10.05.2022
механизация не может войти в python
Я делаю сценарий автоматического входа в систему, используя механизированный питон.
Раньше механизировал без проблем, но www.gmarket.co.kr на этом сайте не смог.
всякий раз, когда я пытаюсь войти в систему, всегда возвращается страница входа...
2108 просмотров
schedule
17.02.2023
Как вручную добавить дополнительные файлы cookie в сеанс, в котором уже установлены файлы cookie в механизированном режиме?
У меня есть скрипт Python, который очищает страницу и получает файл cookie. Я хочу добавить еще один файл cookie к существующим файлам cookie, которые отправляются на сервер. Чтобы при следующем запросе у меня были куки с исходной страницы плюс те,...
3753 просмотров
schedule
16.04.2023
Механизм Python не будет правильно анализировать форму
Я пытаюсь отправить форму с помощью механизма Python, но он не будет правильно анализировать рассматриваемую форму. Есть еще 4 формы, которые анализируются правильно, кроме этой формы. Хотя форма правильно анализируется в Perl www::mechanize, но я...
852 просмотров
schedule
29.04.2023
Проблема с кодировкой при загрузке HTML с использованием механизма и Python 2.6
browser = mechanize.Browser()
page = browser.open(url)
html = page.get_data()
print html
Он показывает какие-то странные символы. Я предполагаю, что это строка UTF-8, но Python этого не знает и не может правильно ее показать.
Как я могу...
5119 просмотров
schedule
09.01.2023
XPath, чтобы найти все ссылки только с цифрами?
Я выбрал элемент на странице, содержащий нужные мне ссылки на страницы. Они вроде как <a href="blah">1</a> . Я хочу использовать регулярное выражение с xpath, чтобы я мог получить все ссылки, подобные этой, текст которой \d+ .
Я...
1577 просмотров
schedule
14.05.2022
Механизация и Javascript
Я хочу использовать Mechanize для имитации просмотра веб-страницы с активным JavaScript, включая события DOM и AJAX, и пока я не нашел способа сделать это.
Я посмотрел на некоторые клиентские браузеры Python, которые поддерживают JavaScript, такие...
28636 просмотров
schedule
11.11.2022
Как обработать простой цикл в Perl WWW::Mechanize?
Особенно интересным для меня, как для начинающего PHP/Perl, является этот сайт в Швейцарии: http://www.edi.admin.ch/esv/00475/00698/index.html?lang=de&webgrab_path=http://esv2000.edi.admin.ch/d/entry.asp?Id=1308 Который имеет набор данных из 2700...
313 просмотров
schedule
24.05.2023
Как вы выбираете варианты в форме с помощью Python?
Я хотел бы знать, как выбрать параметры в форме, отформатированной как
<td align="left">
<select name="FORM1" id="FORM1" multiple="multiple" size="5">
<option...
18612 просмотров
schedule
06.05.2022
как разобрать строку, только если одно из ее полей выделено жирным шрифтом? Нокогири и Руби
поэтому у меня есть этот код, который собирает всю необходимую мне информацию о продукте:
# get main page
page = agent.get "http://www.site.com.mx/tienda/index.php"
search_form = page.forms.first
search_result = agent.submit search_form...
270 просмотров
schedule
06.08.2023
Как мне интегрировать эти два кода блоков условий в майнинг на Ruby?
Как интегрировать эти два условия, если мой код очищается без них? Мой код уже работает, но он очищает все строки (значения, выделенные полужирным и полужирным шрифтом) и не очищает строку атрибута заголовка.
Условие 1: анализирует строку...
270 просмотров
schedule
23.01.2023
Отправка формы Mechanze вызывает «Ошибку утверждения» в ответ при попытке .read()
Я пишу программу веб-сканирования с помощью python и не могу войти в систему с помощью mechanize. Форма на сайте выглядит так:
<form method="post" action="PATLogon">
<h2 align="center"><img...
1175 просмотров
schedule
18.01.2023
Не удается войти в Amazon с помощью Ruby Mechanize
Я пытаюсь войти в Amazon, используя Ruby gem Mechanize. Я всегда возвращаюсь на страницу входа без какого-либо сообщения об ошибке. Мне интересно, является ли это ошибкой Mechanize или Amazon блокирует такой доступ. У меня есть код ниже, который вы...
3397 просмотров
schedule
24.04.2022
Проблема Perl WWW::Mechanize cookie
Я пытаюсь автоматизировать сбор ссылок с сайта, который сначала запрашивает капчу. Для этого я фиксирую изображение капчи, чтобы ее можно было решить извне, а затем отправляю решение как часть полей формы. Почему-то не работает. Я подозреваю, что...
2596 просмотров
schedule
24.03.2023
Web Scraper: ограничение количества запросов в минуту/час на одном домене?
Я работаю с библиотекарем над реструктуризацией архива цифровых фотографий его организации.
Я создал робота Python с помощью Mechanize и BeautifulSoup , чтобы извлечь из коллекции около 7000 плохо структурированных и слегка неправильных/неполных...
2367 просмотров
schedule
18.06.2022
Ввод данных для входа на сайт, который не использует формы с помощью Mechanize/Ruby
Мне нужно войти на сайт, чтобы запустить некоторые скрипты. Mechanize с Nokogiri выглядит идеально для этой задачи, но мне трудно вводить информацию для входа, поскольку поля ввода не расположены в формах (agent.page.forms.first дает ноль):...
194 просмотров
schedule
14.08.2022
Почему я получаю бессмысленный контент, используя Perl WWW::Mechanize?
Perl WWW::Mechanize возвращает полный мусор (например, ðäD=°"lc*Ñ2\7 õä1û¼Âc{oî´lDNöÓ8ß5o*F2Õ©-õ£z§2ÜÝ1,³íäþwɯÓQÞÆÁS¿IZDKÁ»,ËmÅS1r4!°s,¥4Jl;\J~í2¼) после извлечения страницы.
Я уверен, что это связано с конкретным веб-сервером, с которого я...
1951 просмотров
schedule
23.03.2023
Mechanize неправильно анализирует поля
Я начинаю использовать mechanize с Rails, но, похоже, он работает неправильно, он не находит поля внутри формы. Я пытался использовать пример с веб-сайта Mechanize, но он не работает. Я сделал:
agent = Mechanize.new
page =...
367 просмотров
schedule
12.05.2023
Используете механизм Python для входа на веб-сайты?
Я использую chanize ( и следую этому руководству ), чтобы попытаться войти на веб-сайты. Я хотел попробовать протестировать его в Twitter, поэтому придумал такой сценарий:
import mechanize
import cookielib
username = 'user' # your...
2447 просмотров
schedule
13.12.2022
class ‹‹ self, alias_method и исправление обезьяны Mechanize::Cookie
У меня возникла проблема с неправильной работой Mechanize::Cookie, и я хочу попытаться ее исправить. Мой код:
class Mechanize::Cookie
class << self; alias_method :old_parse, :parse end
def self.parse(uri, str, log = Mechanize.log)...
798 просмотров
schedule
12.03.2023
