Как массово проверить 100 000 доменов в WHOIS бесплатно и без регистрации
На «
Хабре» опубликовано практическое руководство по массовой проверке WHOIS без платных сервисов и регистрации. Автор предлагает Python-скрипт на базе библиотеки python-whois и готовый блокнот в
Google Colab для пакетной обработки списков доменов, сохранения результатов (домен, дата регистрации, дата окончания) в CSV и дедупликации входного списка. Подчёркнуты ограничения протокола WHOIS (разнородные поля в разных TLD) и предложён унифицированный парсинг через библиотеку.
Ключевые метрики и операционные ориентиры:
- 100 доменов — ~75 секунд на синхронном скрипте; масштабирование до 100 000 доменов — примерно сутки.
- Экономия на платных сервисах крупной проверки оценивается в 5–20 тыс. ₽ при больших объёмах.
- Лимиты WHOIS-серверов: whois.tcinet.ru — до 120 запросов/мин; whois.dns.pl — до 100 запросов/сутки на IP.
- Покрытие: для RU и COM заявлено ~99% успеха; субдомены возвращают данные базового домена.
Рекомендации: добавлять задержки/прокси для обхода квот, хранить результаты инкрементально, при необходимости переходить на асинхронную архитектуру для ускорения. Материал адресован SEO/PBN-практикам, но применим и к задачам доменной разведки и инвентаризации в adtech/pubtech.
Читайте также
Почему поддержка знает о проблемах продукта больше, чем разработка
Docs as Code: документация, которая живёт вместе с кодом
Как я решил автоматизировать контент-маркетинг с помощью ИИ — и почему один
Гибридная RAG-база знаний за 15 минут — почему пришлось собрать собственную облегчённую версию RAG и в чем опасность RAG-фреймворков
Бот, который не забудет полить. Часть 1: строим диалоговую логику на python-telegram-bot
- Стандартизация WHOIS-ответов через python-whois: Библиотека python-whois автоматически находит корректный WHOIS-сервер по TLD и возвращает унифицированные поля (domain, creation_date, expiration_date), сглаживая разнородность форматов в разных зонах. Полезно для AtlasCore/LibTracker: снижает объём кастомных парсеров и ускоряет онбординг новых зон; у поддоменов данные приходят по базовому домену.
[инструмент]
Зарегистрированные пользователи видят только два тезиса.
Зарегистрироваться