что такое прокси чекер
Создаём прокси-чекер стоимостью 100 миллионов за пару дней
Каждый день в сети закипают страсти вокруг относительно популярного IT-ведомства «Роскомнадзор». Недавно наткнулся на одну не сказать, что свежую, но и не достаточно забытую статью о планах на будущее. Суть простая: РКН объявил тендер на разработку «системы контроля за блокировкой сайтов» далее именуемой как «Ревизор».
Чтобы особо не углубляться в суть задачи, вырву из статьи фрагмент интервью с руководителем ведомства Александром Жаровым:
«В конкурсе участвуют четыре компании. Требования, несмотря на то, что они простые, достаточно жесткие. Победит тот, кто предложит наименьшую цену и оптимальное решение. Первоначальная цена контракта — 100 млн рублей». По словам главы надзорного ведомства, система «Ревизор» позволит в реальном времени контролировать эффективность блокировки запрещенных сайтов.
Непосредственно суть задачи (цитата):
Суть действия зонда или программы в том, что она, как обычный пользователь, но быстрее простого пользователя, высылает большое количество запросов по всему перечню запрещенных ресурсов и по количеству ответов способно сообщить инспектору Роскомнадзора, заблокирован ли сайт.
Предположим, что нас интересует только конечный результат: инспектор РКН хочет получить информацию о том, заблокирован ли сайт по каждому из провайдеров.
В принципе задача предельно ясна, попробуем найти «оптимальное решение»:
Давайте гипотетически предположим, что так называемый «Ревизор» — это обычный прокси-чекер, который по определенному прокси получает ответ сервера. Что нам потребуется:
К тому же большинство дата-центров по каждому из провайдеров используют одну и ту же систему обработки реестра, и в этом случае провайдер либо целиком отвечает требованиям Роскомнадзора, либо где-то произошёл недочет, и дата-центр вовсе значения не имеет, я думаю проблема будет глобального масштаба по всему провайдеру в целом.
Тем не менее. Обязать каждого провайдера отдавать прокси выглядит слишком глобально, хотя и примитивно, возможно, в этом и заключается задача Ревизора — обойти эту необходимость. Но если говорить об оптимизации трудозатрат, инспектору не особо-то и поможет этот список, поэтому в любом случае нужно информировать провайдера через отчёт. Соответственно, если поддерживать актуальную информацию по каждому из провайдеров, можно отправлять сигнал соответствующему ведомству на ликвидацию проблемы.
Это сложное, но достаточно примитивное решение. Ждать, пока провайдеры сформируют для РКН список актуальных прокси-серверов, не есть выход. Но, судя по тому, что «на первоначальном этапе на линиях основных операторов связи будет установлено 700 зондов», обязать провайдера дать прокси — это самая маленькая из всех бед!
Ну а теперь давайте вернемся к задаче и рассмотрим «колхозный», но быстрый и еще более примитивный способ получение желаемого результата. Опять же, напомню цитату из поставленной задачи: «инспектор РКН хочет получить информацию о том, заблокирован ли сайт по каждому из провайдеров».
Ну что же, представим, что у нас есть список всех доступных прокси из России. К примеру, их у нас 100 000. Нам потребуются 4-этапа:
Как видите, определить по IP-адресу вашего провайдера не сложно. Соответственно, даже используя список актуальных прокси серверов, можно в 2 этапа провести проверку на опрос каждого прокси на принадлежность к провайдеру, сгруппировать прокси по маркировке всех повторяющихся провайдеров, ну и провести опрос реестра по максимально возможному уникальному списку провайдеров, где уникальностью будет являться принадлежность группы прокси к тому или иному провайдеру. В зависимости от популярности провайдера будет и расширенная группа прокси, но ведь прогнать через каждый прокси все 12 000 запрещенных страниц, и если проблема с популярными провайдерами решаема (так как у популярного провайдера и группа прокси будет сформирована немаленькая, и равномерно распределить ответы по всем 12 000 документам будет вполне реально), то что же делать со списком тех провайдеров, где определён дай бог только один живой прокси? Не прогонять же через него весь список из 12 000 страниц.
P.S Ну и в конце концов, использование прокси это ну совсем «колхозный метод», он лишь показывает возможность реализации. Но и не стоит забывать в большинстве случаев доступные прокси — это чей-то ботнет, и естественно РКН ну ни как не может использовать список прокси.
Фактически Роскомнадзор запланировал куда более дорогостоящий и менее оптимальный вариант реализации задачи. Хотя, если вопрос актуальности исполнения блокировки сайтов стоит настолько остро, надежнее было бы всё же обязать провайдера выделять несколько проксей из своих дата-центров, чтобы актуально проверять отклики по тому или иному ресурсу из реестра запрещённых сайтов. К тому же центр обработки реестра никак не привязан к дата-центру, и алгоритм обработки реестра скорее всего глобален для всего провайдера. А значит осечки будут тоже глобальными, а значит и ограничиться можно списком провайдеров без дополнительных заморочек по каждому дата-центру.
Такое решение выглядит достаточно быстрым и надёжным, а самое главное изобретать велосипед и называть его зондом ни к чему. К тому же от провайдера потребуется то или иное участие в реализации любого из вариантов. Так проще поддерживать актуальность алгоритма на своей стороне, нежели контролировать что-то на стороне провайдера, а для реализации много не потребуется.
Unfx Proxy Checker
Мощный прокси чекер с огромными возможностями и красивым дизайном. Простая сортировка и фильтрация по всем параметрам.
О прокси чекере
🚀🔥 Самый лучший и самый быстрый бесплатный прокси чекер, который вы только можете найти. Прокси чекер был сфокусирован на максимальном удобстве использования, функциональности и UX/UI дизайне. Проект с открытым исходным кодом, так что вы можете быть уверены, что используете полностью чистое программное обеспечение. Будьте осторожны, если вы загрузили его на сторонних ресурсах.
Возможности
Максимум повторов: 10
Судьи
Если URL-вдрес судьи начинается с «https://» будет использован для HTTPS запросов, с «http://» для HTTP.
SOCKS4 и SOCKS5 используют все прокси судьи.
Черный список
Ip могут быть как одиночными (127.0.0.1) так и маской (127.0.0.0/24).
Списки загружаются каждый раз перед началом проверки, без индикации прогресса!
Результаты
Обновления
Проверка на обновления:
Для установленной версии, обновление будет автоматически скачано и установлено.
Если вы используете портативную версию, то загрузка новой версии доступна вручную (будет загружена через браузер).
Геолокационная база IP адресов
Этот продукт включает в себя GeoLite2 от MaxMind, доступно тут.
Хотите помочь улучшить наш прокси чекер?
Если вы нашли ошибку или хотите предложить какую-либо функцию, пожалуйста, создайте issue на Github. Ссылка на репозиторий выше. Не забудьте поставить ⭐ на репозиторий 😎
Unfx Proxy Checker
Powerful proxy checker with huge features and beautiful design. Easy sorting and filtering by all parameters.
About
🚀🔥 Fastest and the best free proxy checker you can find. The proxy checker was focused on maximum usability, functionality and UX/UI design. We keep it in open source, and you can be sure what you use full clear software. Be careful if you downloaded it on another resource.
Features
Judges
If judge URL starts with «https://» will be used for HTTPS requests, with «http://» for HTTP.
SOCKS4 and SOCKS5 will use all proxy judges.
Blacklist
Ip addresses can be as single (127.0.0.1) or with mask (127.0.0.0/24).
Blacklists loads every time before start the check, without a progress overlay!
Results
Updates
Checking for updates:
For installed application update will be downloaded automatically and installed.
If you use portable application, you can download the update manually (will download through your browser).
IP Location database
This product includes GeoLite2 data created by MaxMind, available here.
Want to help improve our proxy checker?
If you find a bug or want to suggest any feature, please create an issue on Github. Link to repository above. Don’t forget to ⭐ the repository 😎
Онлайн-база прокси-листов
Не знаете как использовать прокси? Посмотрите инструкцию для вашего браузера:
IP адрес | Порт | Страна, Город | Скорость | Тип | Анонимность | Последнее обновление |
180.87.102.68 | 80 | SOCKS4 | Высокая | 11 минут | ||
192.111.135.17 | 18302 | SOCKS4, SOCKS5 | Высокая | 11 минут | ||
206.130.133.8 | 57643 | SOCKS4, SOCKS5 | Высокая | 11 минут | ||
184.178.172.13 | 15311 | Статистика за последние два дняПодробнее о прокси-листахПрокси нужны, когда применение VPN либо невозможно, либо неудобно. Например, для массовых действий сразу с множества IP-адресов: парсинга, увеличения просмотров, посещений, снятия лимитов онлайн-сервисов на количество обращений и другие. Прокси из нашего листа не принадлежат нам. Их собирает автоматически «робот-паук» с тысяч разных сайтов в интернете, в том числе с закрытых форумов и даже некоторых приватных баз прокси. Обратите внимание, что это не наши собственные прокси, поэтому мы не можем отвечать за их работоспособность и стабильность, а лишь показываем статус на момент проверки. В правом столбце списка указано, как давно была проверка. Все proxy-серверы из списка проверяются и сортируются по различным параметрам. Пинг же будет варьироваться. Если для вас это важный параметр, то его лучше проверять прямо с того устройства, где будет использован proxy. Для обладателей платной подписки доступна выгрузка proxy-list в форматах txt и csv, а также API-доступ. Доступ к API можно запросить у техподдержки. Free Proxy CheckerFree Proxy CheckerFree proxy checker by RSocksRSocks Proxy Checker is a multifunctional and easy-to-use tool for proxy users. The program checks the proxy list and sorts them by parameters. You can configure a proxy checker using filters and built-in features of the program to work as efficiently as possible with our service, and to check any other proxies. You can make a fast, reliable and intuitive check of the operation of your proxy lists for a whole range of parameters such as: |