ProxyGrab - выдиратель проксиков с сайтов
=================================
Иногда приходится сталкиваться с проблемой поиска большого количества проксиков для каких либо целей (например, для брутфорса). В инете есть сайты, предоставляющие такие списки - есть платные, есть бесплатные.
С платными проблем нет - заплатил деньгу, скачал список, нормально сформированный, и не паришься.
Но с бесплатными проблем много. Обычно эти списки размещены с разбиением на 10, 20 и т.д. проксиков на разных страницах, или со всякими изъебами, типа разных разделителей хоста и порта и т.д., с разными ненужными данными, которые только мешают. Да и вообще: проксики эти постоянно дохнут, следовательно списки часто обновляются. Приходится с определенной периодичностью составлять список заново. Сидеть и делать эту вручную - западло.
Для автоматизирования этого процесса как раз и предназначена эта прога
Она сама скачает и просканит указанные странички в инете (или файлы на харде) и составит удобоваримый список, который потом можно запихать в любую нормальную прогу по чекингу проксей (например, ProxyChecker).
Список изменений (v0.4): [more]
+ Добавлена возможность изменять, удалять имена урлов/файлов
+ Добавлены попап-менюхи для списков урлов/файлов/проксиков
+ Добавлены хоткеи, и теперь они корректно обрабатываются
+ Добавлена проверка на валидность урла и существование файла
+ !Теперь проксики ищутся и по IP, и по доменам
+ !Поиск хоста и порта проксика в соседних колонках html-таблицы
+ Добавлен небольшой список сайтов, где можно найти проксики
* Опять же небольшие изменения в интерфейсе Включена поддержка XP-тем
* Корректное выключение/включение кнопок в зависимости от того, что делает юзер
* В списке урлов последние записываются без начального 'http://'
- Исправлен (в лоб) недочет с обрезанием правого края окна при разрешении 800x600
- При добавлении пустого урла, он не удалялся
- Если начать вводить урл, и нажать Esc - прога закрывалась
- Исправлено множество мелких ошибок
[/more]
Что будет дальше:[more]
+ Запуск отдельных источников на сканирование (т.е. не обязательно сканировать весь список)
+ Свои параметры сканирования для каждого источника
+ Поддержка скриптов (например, на Delphi) или плагинов для сканирования отдельных источников
Думается, что вариант насчет отдельных сканеров для каждого сайта лучше: и работать быстрее будет, и качество выдаваемого результата лучше. Потому что поиск проксиков в таблицах (и не только) оказался далеко не тривиальной задачей. Например, такие списки как на proxz.com (там рядом с IP стоят белые циферки для мусора, специально, чтоп автоматика не схватила ) или на checker.freeproxy.ru ( еще лучше, тут все скриптик делает, т.е. проксик там совсем не в открытом виде, можете посмотреть код)
Вообщем, нужно ваше мнение насчет этого [/more]
Скачать // 323 КБ // ::: _http://proxygrab.nm.ru/ProxyGrab.v0.4.rar
---
Жду ваших пожеланий, предложений, критики... =))
=================================
Иногда приходится сталкиваться с проблемой поиска большого количества проксиков для каких либо целей (например, для брутфорса). В инете есть сайты, предоставляющие такие списки - есть платные, есть бесплатные.
С платными проблем нет - заплатил деньгу, скачал список, нормально сформированный, и не паришься.
Но с бесплатными проблем много. Обычно эти списки размещены с разбиением на 10, 20 и т.д. проксиков на разных страницах, или со всякими изъебами, типа разных разделителей хоста и порта и т.д., с разными ненужными данными, которые только мешают. Да и вообще: проксики эти постоянно дохнут, следовательно списки часто обновляются. Приходится с определенной периодичностью составлять список заново. Сидеть и делать эту вручную - западло.
Для автоматизирования этого процесса как раз и предназначена эта прога
Она сама скачает и просканит указанные странички в инете (или файлы на харде) и составит удобоваримый список, который потом можно запихать в любую нормальную прогу по чекингу проксей (например, ProxyChecker).
Список изменений (v0.4): [more]
+ Добавлена возможность изменять, удалять имена урлов/файлов
+ Добавлены попап-менюхи для списков урлов/файлов/проксиков
+ Добавлены хоткеи, и теперь они корректно обрабатываются
+ Добавлена проверка на валидность урла и существование файла
+ !Теперь проксики ищутся и по IP, и по доменам
+ !Поиск хоста и порта проксика в соседних колонках html-таблицы
+ Добавлен небольшой список сайтов, где можно найти проксики
* Опять же небольшие изменения в интерфейсе Включена поддержка XP-тем
* Корректное выключение/включение кнопок в зависимости от того, что делает юзер
* В списке урлов последние записываются без начального 'http://'
- Исправлен (в лоб) недочет с обрезанием правого края окна при разрешении 800x600
- При добавлении пустого урла, он не удалялся
- Если начать вводить урл, и нажать Esc - прога закрывалась
- Исправлено множество мелких ошибок
[/more]
Что будет дальше:[more]
+ Запуск отдельных источников на сканирование (т.е. не обязательно сканировать весь список)
+ Свои параметры сканирования для каждого источника
+ Поддержка скриптов (например, на Delphi) или плагинов для сканирования отдельных источников
Думается, что вариант насчет отдельных сканеров для каждого сайта лучше: и работать быстрее будет, и качество выдаваемого результата лучше. Потому что поиск проксиков в таблицах (и не только) оказался далеко не тривиальной задачей. Например, такие списки как на proxz.com (там рядом с IP стоят белые циферки для мусора, специально, чтоп автоматика не схватила ) или на checker.freeproxy.ru ( еще лучше, тут все скриптик делает, т.е. проксик там совсем не в открытом виде, можете посмотреть код)
Вообщем, нужно ваше мнение насчет этого [/more]
Скачать // 323 КБ // ::: _http://proxygrab.nm.ru/ProxyGrab.v0.4.rar
---
Жду ваших пожеланий, предложений, критики... =))