Gentoo Archives: gentoo-user-ru

From: Mad Deer <mad-deer@××××.ru>
To: gentoo-user-ru@l.g.o
Subject: Re: [gentoo-user-ru] DNS snapshot
Date: Fri, 23 Oct 2009 20:36:00
Message-Id: 4AE213AE.1060601@mail.ru
In Reply to: [gentoo-user-ru] DNS snapshot by Anton Ananich
1 Anton Ananich пишет:
2 > Здравствуйте, коллеги!
3 >
4 > У меня есть немного странный вопрос немного не в тему. Есть такая
5 > проблема: нужно получить список доменных имен, которые на данный
6 > момент зарегистрированы в Интернете. Это нужно как бы для
7 > маркетингового анализа.
8 >
9 > Я конечно, понимаю, что все доменные имена будут весить слишком много,
10 > счет будет вестись гигабайтами. Да в принципе для практических нужд
11 > хватило бы и небольшого набора: например, зона com, имена не длиннее 5
12 > символов.
13 >
14 > Наверняка я не первый, кто столкнулся с этой задачей. Есть ли способы
15 > более оптимальные чем net-misc/whois ? Я хотел попробовать
16 > net-dns/mydns но понял, что он несколько для других целей...
17 >
18 > С уважением,
19 > Антон
20 сам пробовал искасть что-то в этом роде, понял что нет
21 есть списки ru, можно попробовать найти ещё какие-нибудь, но списока всех инета боюсь нет.
22 http://pr4.ru/files/ru_domains.gz
23 думал пробовать генерить и whoisом или host проверять, но понял что тольок на генерацию куча времени
24 уйдёт
25 (64 символа в домене из 37 (помоему) вариантов знаков ) даже на запись вариантов хрен какой винт
26 хватит,
27 а любой провайдер меня заблочит на днс как только я начну всё это проверять.
28 если кто сможет подсказать способ по эффективней буду рад услышать
29
30 единственный более менее аффективный способ spider по аналогии поиковых серверов
31 он выкачивает весь инет и ищет среди скачаных страниц новые домены,
32 но тут канал надо толстый иметь и кластер серверов
33
34 можно попросить базу у этого перца http://www.myipneighbors.com/
35 но у него она давно не актуальная, и никак не пойму как он её собирает (по-моему как раз spiderом )
36
37 --
38 Да здравствует то, благодаря чему мы, несмотря ни на что.(c) Задорнов
39 Registered Linux User #317544
40 Linux 2.6.30-tuxonice-r5 i686 AMD Phenom(tm) II X4 810 Processor

Replies

Subject Author
Re: [gentoo-user-ru] DNS snapshot Anton Ananich <anton.ananich@×××××.com>