Есть ли способ периодически загружать всю базу данных whois для всех доменных имен? Я пишу программу, которая должна проверить возраст домена и найти регистратора с учетом ввода имени домена, мне нужно сделать это очень быстро.
Скачать базу данных whois
Ответ 1
Whois API предлагает полную загрузку базы данных whois в основных версиях GTLD (.com,.net,.org,.us,.biz.,.mobi, и т.д.) Что еще, он обеспечивает архивированную историческую базу данных whois как в разобранном, так и в необработанном формате для загрузки в виде файлов CSV. Я использовал частичную загрузку базы данных для проекта компании (связанный с SEO), и качество данных было довольно хорошим.
Ответ 2
Я бы написал сканер с централизованной базой данных, а затем запустил несколько экземпляров на масштабируемых серверах, например, из Amazon. Указанный искатель может анализировать веб-страницы, каталоги, поиск из словарей, почти каждый источник, который можно себе представить, а затем обновлять вашу базу данных соответственно.