Случай сканера Selenium, который анализирует механизм проверки всплывающих окон веб-страницы и стратегии реагирования.
Случай сканера Selenium, который анализирует механизм проверки всплывающих окон веб-страницы и стратегии реагирования.

При извлечении данных веб-страницы вы часто сталкиваетесь с проверкой всплывающего окна веб-страницы. Эти механизмы проверки всплывающих окон предназначены для предотвращения доступа роботов или нелегальных сканеров, что создает определенные проблемы для программ-сканеров. В этой статье будет показано, как использовать библиотеку Selenium для анализа механизма проверки всплывающих окон веб-страницы и предоставления соответствующих контрмер.

Эти всплывающие окна проверки могут содержать проверочные коды, запросы на вход в систему и т. д., что создает проблемы для программ-сканеров. Нам нужно найти способ проанализировать эти механизмы проверки всплывающих окон и предоставить соответствующие контрмеры, чтобы гарантировать, что программа-сканер сможет работать нормально. Целью проверки веб-страницы как бомбы является предотвращение доступа роботов или нелегальных сканеров. Эти механизмы проверки обычно реализуются на основе JavaScript или других интерфейсных технологий и проверяют подлинность пользователя, определяя поведение окна или отправляя определенные запросы на сервер. Для программ эти механизмы проверки могут помешать программе правильно получить доступ к веб-страницам или получить необходимые данные.

Чтобы проанализировать механизм проверки всплывающих окон веб-страницы и соответствовать соответствующей стратегии, мы можем использовать библиотеку Selenium. Selenium — это мощный инструмент веб-автоматизации, который может имитировать действия пользователя в браузере, включая нажатие, ввод текста, отправку форм и т. д. Ниже приведен пример кода, который использует Selenium для анализа проверки всплывающих окон веб-страницы:

Язык кода:javascript
копировать
from ... 'popup')))

# Проверка всплывающего окна разбора
popup_text = popup_element.text

# Обработка всплывающего окна с кодом подтверждения
if 'Проверочный код' in popup_text:
    # Получить изображение кода подтверждения
    captcha_image = driver.find_element(By.ID, 'captcha-image')
    captcha_image.screenshot('captcha.png')

    # Используйте сторонние библиотеки для анализа кодов проверки.
    captcha_text = solve_captcha('captcha.png')

    # Введите код подтверждения и отправьте
    captcha_input = driver.find_element(By.ID, 'captcha-input')
    captcha_input.send_keys(captcha_text)
    captcha_input.submit()

Подсказка в окне входа в систему

Язык кода:javascript
копировать
from ... 'popup')))

# Проверка всплывающего окна разбора
popup_text = popup_element.text

# Обработка окна приглашения на вход
if «Окно подсказки для входа в систему» in popup_text:
    # Введите имя пользователя и пароль
    username_input = driver.find_element(By.ID, 'username-input')
    password_input = driver.find_element(By.ID, 'password-input')
    username_input.send_keys('your_username')
    password_input.send_keys('your_password')

    # Нажмите кнопку входа в систему
    login_button = driver.find_element(By.ID, 'login-button')
    login_button.click()

В этих примерах кода показано, как использовать библиотеку Selenium для решения распространенных проблем проверки всплывающих окон веб-страниц. Для всплывающего окна кода проверки мы можем перехватить изображение кода проверки и использовать стороннюю библиотеку для его анализа. Ниже приведен пример кода, который использует Selenium для анализа всплывающего окна веб-страницы:

Язык кода:javascript
копировать
import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.chrome.ChromeDriver;

public class PopupVerificationDemo {
    public static void main(String[] args) {
        // Установите информацию о прокси-сервере Yiniu Cloud
        String proxyHost = "t.16yun.cn";
        int proxyPort = 30001;

        // Настроить путь к ChromeDriver
        System.setProperty("webdriver.chrome.driver", "path/to/chromedriver");

        // Создать экземпляр ChromeDriver
        WebDriver driver = new ChromeDriver();

        // Установить прокси
        String proxy = proxyHost + ":" + proxyPort;
        org.openqa.selenium.Proxy seleniumProxy = new org.openqa.selenium.Proxy();
        seleniumProxy.setHttpProxy(proxy).setFtpProxy(proxy).setSslProxy(proxy);
        org.openqa.selenium.Proxy proxy = new org.openqa.selenium.Proxy();
        proxy.setHttpProxy(proxy).setFtpProxy(proxy).setSslProxy(proxy);
        DesiredCapabilities capabilities = new DesiredCapabilities();
        capabilities.setCapability(CapabilityType.PROXY, proxy);
        ChromeOptions options = new ChromeOptions();
        options.merge(capabilities);
        WebDriver driver = new ChromeDriver(options);

        // Посетите целевую страницу
        driver.get("https://example.com");

        // Проверка всплывающего окна разбора
        WebElement popupElement = driver.findElement(By.id("popup"));
        String popupText = popupElement.getText();

        // Обработка всплывающего окна проверки
        if (popupText.contains("Код проверки")) {
            // Обработка логики кода проверки
            // ...
        } else if (popupText.contains("Окно приглашения на вход")) {
            // Обработка окна приглашения на входлогика
            // ...
        }

        // Закрыть браузер
        driver.quit();
    }
}

Анализ механизма всплывающих окон веб-страниц и соответствующих стратегий является важной задачей при сканировании данных. Благодаря использованию библиотеки Selenium наше окно проверки может легко обрабатывать различные типы проверки всплывающих окон, чтобы гарантировать бесперебойную работу программы-сканера. . В реальных приложениях мы можем написать соответствующую логику обработки на основе конкретных типов проверки всплывающих окон для работы с различными сценариями проверки. Благодаря постоянному обучению и практике мы можем улучшить стабильность и эффективность программы-сканера, чтобы лучше получать необходимые нам данные веб-страницы.

Ссылки:

boy illustration
Углубленный анализ переполнения памяти CUDA: OutOfMemoryError: CUDA не хватает памяти. Попыталась выделить 3,21 Ги Б (GPU 0; всего 8,00 Ги Б).
boy illustration
[Решено] ошибка установки conda. Среда решения: не удалось выполнить первоначальное зависание. Повторная попытка с помощью файла (графическое руководство).
boy illustration
Прочитайте нейросетевую модель Трансформера в одной статье
boy illustration
.ART Теплые зимние предложения уже открыты
boy illustration
Сравнительная таблица описания кодов ошибок Amap
boy illustration
Уведомление о последних правилах Points Mall в декабре 2022 года.
boy illustration
Даже новички могут быстро приступить к работе с легким сервером приложений.
boy illustration
Взгляд на RSAC 2024|Защита конфиденциальности в эпоху больших моделей
boy illustration
Вы используете ИИ каждый день и до сих пор не знаете, как ИИ дает обратную связь? Одна статья для понимания реализации в коде Python общих функций потерь генеративных моделей + анализ принципов расчета.
boy illustration
Используйте (внутренний) почтовый ящик для образовательных учреждений, чтобы использовать Microsoft Family Bucket (1T дискового пространства на одном диске и версию Office 365 для образовательных учреждений)
boy illustration
Руководство по началу работы с оперативным проектом (7) Практическое сочетание оперативного письма — оперативного письма на основе интеллектуальной системы вопросов и ответов службы поддержки клиентов
boy illustration
[docker] Версия сервера «Чтение 3» — создайте свою собственную программу чтения веб-текста
boy illustration
Обзор Cloud-init и этапы создания в рамках PVE
boy illustration
Корпоративные пользователи используют пакет регистрационных ресурсов для регистрации ICP для веб-сайта и активации оплаты WeChat H5 (с кодом платежного узла версии API V3)
boy illustration
Подробное объяснение таких показателей производительности с высоким уровнем параллелизма, как QPS, TPS, RT и пропускная способность.
boy illustration
Удачи в конкурсе Python Essay Challenge, станьте первым, кто испытает новую функцию сообщества [Запускать блоки кода онлайн] и выиграйте множество изысканных подарков!
boy illustration
[Техническая посадка травы] Кровавая рвота и отделка позволяют вам необычным образом ощипывать гусиные перья! Не распространяйте информацию! ! !
boy illustration
[Официальное ограниченное по времени мероприятие] Сейчас ноябрь, напишите и получите приз
boy illustration
Прочтите это в одной статье: Учебник для няни по созданию сервера Huanshou Parlu на базе CVM-сервера.
boy illustration
Cloud Native | Что такое CRD (настраиваемые определения ресурсов) в K8s?
boy illustration
Как использовать Cloudflare CDN для настройки узла (CF самостоятельно выбирает IP) Гонконг, Китай/Азия узел/сводка и рекомендации внутреннего высокоскоростного IP-сегмента
boy illustration
Дополнительные правила вознаграждения амбассадоров акции в марте 2023 г.
boy illustration
Можно ли открыть частный сервер Phantom Beast Palu одним щелчком мыши? Супер простой урок для начинающих! (Прилагается метод обновления сервера)
boy illustration
[Играйте с Phantom Beast Palu] Обновите игровой сервер Phantom Beast Pallu одним щелчком мыши
boy illustration
Maotouhu делится: последний доступный внутри страны адрес склада исходного образа Docker 2024 года (обновлено 1 декабря)
boy illustration
Кодирование Base64 в MultipartFile
boy illustration
5 точек расширения SpringBoot, супер практично!
boy illustration
Глубокое понимание сопоставления индексов Elasticsearch.
boy illustration
15 рекомендуемых платформ разработки с нулевым кодом корпоративного уровня. Всегда найдется та, которая вам понравится.
boy illustration
Аннотация EasyExcel позволяет экспортировать с сохранением двух десятичных знаков.