Запись опубликована Заработок в интернете, блог о том как заработать в интернете. Работа в интернете на себя. Пожалуйста, оставляйте комментарии там.
Если вам вдруг понадобилась база сайтов, например стэнд-алон блогов, то ее можно найти на каком-нибудь форуме, но обычно такие базы не раздают бесплатно, а продают. Можно напарсить базу самостоятельно, если умеете программировать, а если не умеете или не охота, то вот вам бесплатный простой способ напарсить базу сайтов без всякого программирования.
Для парсинга базы нам понадобятся 2 программы:
- Download Master (бесплатная).
- Extract Link (скачать). Программа не требует установки, просто скачиваете и запускаете.
Допустим, нам нужна база блогов. Покажу на примере рейтинга блогов, как ее получить.
1. Прокручиваем страницу рейтинга вниз и копируем ссылку на последнюю страницу:
2. Открываем Download Master и добавляем группу закачек:
3. Вставляем скопированный урл последней страницы, заменяем «111» на «$» и говорим, что переменная должна меняться от 0 до 111, нажимаем ОК, потом еще раз:
4. Выбираем, куда сохранить html-файлы и начинаем закачку:
5. После того, как все html-страницы сохранились, нам нужно выдрать из них ссылки на блоги, для этого используем Extract Link. Нажимаем кнопку «New Search», выбираем папку с сохраненными html-страницами, на вкладке Option отметьте галочками «Remove duplicate results» и «Remove duplicate base», на вкладке Exclude/Exclude Text напишите построчно feedburner.com и blograte.ru, чтобы в базе было меньше ненужных урлов:
6. После парсинга html-страниц получим список урлов, встречающихся на сохраненных страницах. У меня получилось 3343 урлов вместо 3337 (6 ссылок на главной странице лишние). Результат сохраняете в txt или excel-файл:
7. Получили базу менее чем за 10 минут. Остается использовать ее по назначению 
Аналогично можно парсить выдачу поисковиков, различные каталоги и рейтинги.
// Интернет-магазин проекторов FineBuy продает проекторы optoma, Acer, Benq, Epson, Lg и другие марки по выгодным ценам. Предусмотрена доставка по России.
// На сайте OnlyDvdRip можно совершенно бесплатно скачать боевики и любые другие фильмы без регистрации. Большинство фильмов в качестве DVDRip.
![[info]](http://l-stat.livejournal.com/img/userinfo.gif){kind=small}
Вот блин, тема на серче существует уже с 3-его сентября, а я только сегодня узнал из бомжеленты, что Яндекс начал массово сокращать число проиндексированных страниц на ГС и не только. Вобщем яндексойды ввели какой-то фильтр, дабы выкинуть из выдачи говносайты + не учитывать ссылки с них. В результате под данный фильтр нечаянно попали и нормальные сайты для людей, молодые и старые, т.е. точные признаки, по которым ударил фильтр непонятны.
Как правильно отметил Bormaley в своем недавнем посте, заниматься исключительно сайтами под сапу — это «
