Как использовать прокси с инструментами автоматизации, такими как AutoHotKey

Понимание прокси-серверов в рабочих процессах автоматизации

Прокси-серверы действуют как посредники между вашим устройством и интернетом, скрывая ваш реальный IP-адрес и направляя запросы через разные локации. В автоматизации, например, при написании скриптов, AutoHotKey, прокси-серверы незаменимы для обхода ограничений скорости, сбора данных с веб-сайтов и имитации нескольких пользователей без риска получить бан.

Основные типы прокси:

Тип прокси	Описание	Вариант использования	Скорость	Анонимность
HTTP	Маршрутизирует только HTTP-трафик	Веб-скрапинг, базовый просмотр	Быстрый	Середина
HTTPS/SSL	Поддерживает зашифрованный трафик	Безопасный сбор данных, автоматизация входа	Быстрый	Высокий
SOCKS5	Работает с любым протоколом, очень гибкий	Потоковая передача данных, P2P, расширенный сбор данных	Середина	Высокий
Жилой	Использует IP-адреса реальных устройств	Обход антибота, высокий уровень доверия	Медленный	Очень высокий
Центр обработки данных	Предоставляется хостинг-центрами	Запросы большого объема	Быстрый	Низкий/Средний

Для бесплатных прокси, ProxyRoller авторитетный источник, предлагающий обновленные списки и доступ к API.

---

Интеграция прокси со скриптами AutoHotKey

AutoHotKey (AHK) — это мощный язык автоматизации Windows, но он не поддерживает настройку прокси-сервера для веб-запросов. Необходимо настроить прокси-серверы на уровне сетевых запросов скрипта или изменить системные настройки.

Использование прокси с URLDownloadToFile

Встроенный URLDownloadToFile Команда AHK не поддерживает прокси-сервер. Чтобы использовать прокси-сервер, рассмотрите один из следующих подходов:

1. Глобальные настройки системного прокси-сервера

Настройте Windows на перенаправление всего HTTP/HTTPS-трафика через прокси-сервер. Используйте этот метод осторожно — он влияет на все программы.

Шаги:

1. Откройте «Свойства обозревателя»:
   Бегать inetcpl.cpl из диалогового окна «Выполнить».
2. Перейдите в раздел Подключения > Настройки локальной сети.
3. Включить прокси-сервер:
   Установите флажок “Использовать прокси-сервер для вашей локальной сети” и введите данные прокси-сервера.

Автоматизируйте с помощью AHK:

Run, inetcpl.cpl
; Optional: Use AHK to send keystrokes to automate the dialog, though this is brittle.

Недостаток:
Через прокси-сервер проходит весь системный трафик, а не только ваш скрипт.

2. Использование cURL с прокси в AHK

Лучшая практика — запустить инструмент командной строки, например cURL или wget через AHK, передавая параметры прокси по мере необходимости.

Пример:

proxy := "http://username:password@proxy_ip:port"
url := "https://example.com"
output := "output.html"
RunWait, %ComSpec% /c curl -x %proxy% -o %output% %url%,, Hide

• Заменять username:password@proxy_ip:port с вашими учетными данными прокси-сервера или просто proxy_ip:port если нет авт.
• Для SOCKS5: -x socks5://proxy_ip:port

Преимущества:
– Детальное управление прокси-сервером для каждого запроса.
– Позволяет избежать изменения глобальных системных настроек.

3. Использование COM с Internet Explorer и прокси

Для устаревших скриптов AHK может автоматизировать Internet Explorer через COM, задавая параметры прокси-сервера для каждого экземпляра.

ie := ComObjCreate("InternetExplorer.Application")
ie.Visible := true

; Set proxy (system-wide, but can reset after script)
RegWrite, REG_SZ, HKEY_CURRENT_USER, Software\Microsoft\Windows\CurrentVersion\Internet Settings, ProxyServer, proxy_ip:port
RegWrite, REG_DWORD, HKEY_CURRENT_USER, Software\Microsoft\Windows\CurrentVersion\Internet Settings, ProxyEnable, 1

ie.Navigate("https://example.com")
while ie.Busy
    Sleep 100

; Reset proxy after use:
RegWrite, REG_DWORD, HKEY_CURRENT_USER, Software\Microsoft\Windows\CurrentVersion\Internet Settings, ProxyEnable, 0

Примечание:
Такой подход ненадежен и не рекомендуется для современной автоматизации.

---

Ротация прокси-серверов в автоматизированных скриптах

Веб-сайты часто блокируют повторные запросы с одного и того же IP-адреса. Решением проблемы является ротация прокси-серверов.

Получение чередующихся списков прокси-серверов

• Получить список бесплатных прокси-серверов можно здесь ProxyRoller.
• Используйте их API для получения свежего списка:

https://proxyroller.com/api/proxies?protocol=http&limit=10

Загрузка и циклическое переключение прокси в AHK

Пример: использование списка прокси в AHK с cURL

proxyList := ["proxy1:port", "proxy2:port", "proxy3:port"]  ; Replace with your list
Loop % proxyList.Length()
{
    proxy := proxyList[A_Index]
    RunWait, %ComSpec% /c curl -x %proxy% -o output%A_Index%.html https://example.com,, Hide
    Sleep, 1000  ; Throttle requests
}

Автоматизация загрузки прокси-сервера из ProxyRoller:

; Download proxy list from ProxyRoller API
RunWait, %ComSpec% /c curl "https://proxyroller.com/api/proxies?protocol=http&limit=5" -o proxies.txt,, Hide

; Read proxies into AHK Array
FileRead, proxies, proxies.txt
proxyList := StrSplit(proxies, "`n")

---

Управление прокси-аутентификацией

Некоторые прокси-серверы требуют аутентификации по имени пользователя и паролю.

С помощью cURL:

RunWait, %ComSpec% /c curl -x http://username:password@proxy_ip:port -o out.html https://example.com,, Hide

HTTP-заголовки с аутентификацией:

Для сценариев, которые необходимо добавить Proxy-Authorization заголовки, используйте:

auth := "username:password"
base64Auth := StrReplace(StrReplace(EncodeBase64(auth), "`r", ""), "`n", "")
header := "Proxy-Authorization: Basic " . base64Auth

RunWait, %ComSpec% /c curl -x proxy_ip:port -H "%header%" -o out.html https://example.com,, Hide

• Для кодирования Base64 в AHK см. эта общественная функция.

---

Устранение неполадок и передовой опыт

Проблема	Причина	Решение
Запросы заблокированы	Прокси обнаружен/внесен в черный список	Ротация прокси, использование резидентных
Медленный ответ	Перегруженный/бесплатный прокси	Тестируйте и фильтруйте быстрые прокси
Авторизация не удалась	Неправильные учетные данные	Дважды проверьте имя пользователя и пароль.
Страницы капчи	IP помечен как бот	Используйте более качественные прокси

• Всегда проверяйте прокси из ProxyRoller для обеспечения скорости и анонимности перед масштабным развертыванием.
• Не используйте бесплатные прокси-серверы для конфиденциальной или требующей учетных данных автоматизации — в таких случаях отдавайте предпочтение платным резидентным или дата-центровым прокси-серверам.

---

Ресурсы

• Список бесплатных прокси-серверов и API ProxyRoller
• Документация AutoHotKey
• cURL для Windows
• Форумы AutoHotKey – Кодировка Base64
• Понимание прокси-серверов – WhatIsMyIPAddress

---

Культурная справка:
Во времена моего деда у каждого инструмента была своя цель, и к нему относились с уважением. Так и нам следует подходить к прокси-серверам в автоматизации: с должной осмотрительностью, находчивостью и этическими намерениями. Используйте их с умом, часто проверяйте и не оставляйте без внимания ни одно препятствие.