[ Набор начинающего proxy-грабера ]
Данная статья посвящается начинающим прокси-граберам. Для чего она? По меньшей мере, вы научитесь без труда грабить
прокси с паблик ресурсов, "охотиться" на них, проверять на валидность и много другое… Так же вы сможете помогать нашему
форуму выкладывая в нём найденные вами прокси…
Стандартный комплект
В данном пункте давайте посмотрим программы, которые нам понадобятся, эдак джентльменский набор прокси-грабера. Нам
понадобятся такие программы как:
ProxyListFilter - программа, которая преобразует список proxy серверов из практически любых форматов (включая HTML) в
стандартный вид, понимаемый Proxy Checker'ами.
ProxyGrab - программа, которая "грабит" прокси с паблик ресурсов.
Proxy Hunter - одна из лучших программ для "охоты" на прокси, просто задаёшь ей диапазон сканирования и порт, а она
выдаёт тебе список насканенных ей проксиков (но это не значит, что все проксики будут работать).
Proxy Checker - самая лучшая прога для чеканья прокси, мастхэв!
Разбираемся с программами
Давайте теперь попробуем разобраться с каждой из программ.
ProxyListFilter
Думаю использование этой программы не вызовет у вас никакого затруднения, просто загружаем нужный для преобразования
вами файл, ставим опции по вашему вкусу и нажимаем кнопку "RUN".
ProxyGrab
Эта тулза тоже очень проста в обращении, напомним, она создана, чтобы вы могли грабить прокси с паблик ресурсов. Без
этой программы вы конечно же можете обойтись, но кому нравятся надоедливые похождения с одного сайта на другой, с одной
страницы на другую… Да ещё и встречается часто, что паблик прокси на страницы разбиты по 10-20 штук и переходить туда
сюда, чтобы пролистать сотню такого списка очень нудно… При том если учесть что паблик постоянно дохнёт, вам придётся
повторять это процедуру практически каждый день… Чтобы всё шло автоматом, вам как раз и понадобится данная тулза, она
сама скачает и просканит указанные странички в инете и составит вам удовлетворяющий вас список (то есть который будет
читаться чекерами). В проге есть два режима - сканить файлы или сайты в инете. В обоих режимах можно сохранять/загружать
списки урлов/файлов, добавлять/изменять/удалять урл/файл, есть кнопки старт и стоп, выполняющие соответствующие названиям
функции. Прога очень проста в обращение, поэтому разбирать тут в принципе нечего, ну дам для ознакомления хоткеи:
Alt+F1 - режим сканирования сайтов
Alt+F2 - режим сканирования файлов
Ctrl+O - добавление списка урлов/файлов из файла
Ctrl+S - сохранение списка урлов/файлов в файл
Ctrl+Del - очистка списка
Ins - добавление урла/файлов
Del - удаление урлов/файлов
F2 - изменение имени урла/файла
Enter - начать сканирование
Esc - остановить сканирование
Shift+Ctrl+S - сохранение списка найденных проксиков в файл
Alt+X - выход из проги
Ну и как советует разработчик перед использованием версии новее, лучше удалять старый файл настроек proxygrab.ini.
Proxy Hunter
Данная тулза находится в разделе "мастхэв ту прокси-грабер". Имеется огромное количество опций сканирования, но мы
разберём только самое простенькое, чтобы не грузить мозги и как никак данная статья не руководство пользователя прокси
хантером. Давайте разберёмся с тем минимумом, который вам поможет насканить прокси. Если у вас прямые руки, то вы легко
с самостоятельностью сможете разобраться дальше. Чтобы начать сканирование нам нужно задать задание: выбираем пункт
"Task" (показываю на основе английской версии) -> "Add task" и выбираем Task type: "Searching task"(это обычное задание
для сканирования) нажимаем кнопку "далее", затем выбираем условие сканирования, нам предлагается 5вариантов:
[1. Start&End range]
ProxyHunter будет сканить прокси в указаном вами диапазоне.
[2. Address varying range]
Переводим дословно предел изменения адреса.
[3. Single IP]
Только один host IP.
[4. Start+Subnet mask]
Тоже самое что и 1 пункт, но немножко другой метод задавания маски.
[5. Start+Subnet size]
Тоже самое что и 1 пункт, но немного отличный.Что-то типа 2B, 16C.
Выбираем нужный вам пункт и нажимаем "далее", теперь нам предоставляется выбрать порты для наших сканируемых прокси,
опять нажимаем "Add" выбираем один порт или диапазон портов и тип проксиков которые вы хотите насканить, в наличие:
HTTP, Socks, Telnet (Wingate), FTP, POP3. Ставим галочку там где "Must try" и нажимаем "ок" затем "Готово". Так задание
по сканированию проксиков у нас заданно нажимаем "Start" сканирование пошло! =) После сканирования смотрим ваш резалт
лист, копируем все прокси, вставляем их в чекер и проверяем. Ну вот, в принципе с хантером разобрались…
Proxy Checker
Вот мы награбили, насканили огромное количество проксиков, но как очистить весь список от не рабочих? Вы задаёте себе
этот вопрос? Тогда эта програмулька именно для вас! Да и вообще пригодится для проверки на валидность, ибо лучше не
всречал! Не знаю даже, нужно ли представлять эту программу или нет… Ну ладно, для тех кто в танке эта тулза предназначена
для проверки проксиков на валидность, которя также может указать:
Hostname
Status
RT, ms
PFH, ms
Speed b/s
Country
Ну и многое другое…
Также имеется возможность внесения проксиков из БД, из списка и по одной штуки, это уже как хозяину угодно будет.
Разбираться в принципе тут не с чем, добавляете прокси в лист проверки, проверяете, хорошие сохраняете, всё!
Ну в принципе с комплектом хорошего граббера мы познакомились, от себя хочу добавить пару советов:
[*] Некогда не продавайте награбленные вами паблик-прокси (если конечно кто-то не захотел купить большую рабочую базу
пабликов)! Ибо кому нужен лишний блэк, да и подводить людей, которые надеятся что используют анонимный проксик, а сами
светятся везде где только не были…
[*] Выкладывайте списки ваших прокси на форуму с разделами соответствующей тематики, ибо хотя и паблик, а пригодится
могут...
[*] Внимательно познакомьтесь с проксями (Что такое? Где? Почему? итп)
[*] И реализовывайтесь, научитесь добывать приватные прокси! Пишите программы которые могут помочь как для грабинга,
как и для анонимности!
(c) ZeroCool