Регистрация Главная Пользователи Все разделы прочитаны
Сообщения за день Справка Регистрация

WebParser

-

Боты, скрипты и прочий софт для Lineage 2

- Весь софт по Lineage 2 и все, что связано с ботоводством, скриптописанием и брутом - в этом разделе

Ответ
 
Опции темы
Старый 03.08.2012, 11:26   #1
Заблокирован
 Разведчик
Аватар для MrDie
 
MrDie на правильном путиMrDie на правильном пути
Регистрация: 13.06.2012
Сообщений: 21
Популярность: 151
Сказал(а) спасибо: 14
Поблагодарили 52 раз(а) в 13 сообщениях
Отправить сообщение для MrDie с помощью Skype™
 
По умолчанию WebParser

Нашел довольно таки хороший и функциональный парсер:

Универсальный парсер для сбора выдачи поисковых систем и создания баз сайтов необходимых CMS
Программа WebParser. Парсинг и анализ сайтов. Сбор баз сайтов.

Вам надоело, искать сайты и покупать базы? Тогда вы точно пришли по адресу. Новая уникальная программа WebParser предназначена для поиска сайтов любой CMS в многопоточном режиме, все что необходимо это задать поисковую фразу, состояющую из любого слова, категории, названия новости в сочетании с именем автора и в данном случае программа найдет все сайты на которых данный автор опубликовал свою новость, или при поиске по другой поисковой фразе программа быстро найдет список сайтов релевантных вашему запросу. В программе WebParser предусмотрен поиск зарубежных сайтов, а также использование списка прокси серверов и полное автосохранение всех настроек. Работает с Google, Yandex, Metabot Google&Yahoo Search API. Программа отлично ищет DLE, WordPress, Joomla, uCoz, phpBB и многие другие движки, которые вы с легкостью можете добавить в программу. Также можно искать список всех ссылок по указанному URL и анализировать их. Программа работает очень быстро. В полной версии вы можете использовать генератор ключевых фраз по дате и макропеременным. В программе ведется лог активности. Наглядный, дружественный, удобный и понятный интерфейс. Имеется возможность сворачивания программы в трей.

В программе предусмотрено множество настроек режимов парсинга, например таких опций, как:
- парсинг доменов, парсинг доменов с папками - что полезно при поиске форумов phpBB, т.к. они часто расположены в определенной папке.

- парсинг полных ссылок в таком виде в каком они были найдены в выдаче поисковой системы или на указанном сайте.

- опции сбора всех ссылок с поисковой системы без анализа или с анализом ссылок, с проверкой или без проверки на работоспособность ссылки и включение и отключение проверки на дубликаты.

- настраиваемая глубина поиска, язык искомых сайтов, количсетво ссылок на странице поисковой системы, парсинг DOM элементов или парсинг страницы как текста, например при поиске ссылок в JSON или XML.

- настройка максимального времени отклика анализируемого сайта.

- интеграция модуля антикаптча, для автоматического разгадывания каптч.

- обавление своих поисковых систем и анализаторов, для поиска различных CMS выполняется в 2 шага.

Данные хранятся в Базе Данных, сайты добавляются в таблицу либо в указанный файл, если включен режим работы с файлами, автоматическое отсеивание дубликатов сайтов В парсер встроен модуль чекер-прокси, возможность парсинга с использование списка прокси, также если для прокси появляется каптча, есть возможность автоматической её деактивации на установленное время и обработка того же URL уже под другой прокси, в парсер встроена автоматическая проверка прокси на работоспособность. Есть возможность печати данных, а также экспорт базы в различные форматы такие как CSV, XML, TXT, возможность кодирования данных напрямую в другую БД. Автоматическое обновление программы на новую версию и модификация БД одним кликом в меню. Все это и многое другое в программе WebParser Веб-Парсер.

Программа парсингует поисковые системы на ссылки и находит ссылки на сайты написанные на той CMS, которую вы укажите при парсинге. Работает в неограниченном, настраиваемом количестве потоков. Работает через список прокси и без него. В программе предусмотрен ввод каптчи гугла и яндекса. Если сайт - является дублем - его анализ даже не будет запущен и добавлен в список.

В полной версии вы можете использовать:

- прокси сервер
- список ключевых фраз
- неограниченное количество потоков
- парсинг любой CMS
- автосохранение всех данных
- исключение дубликатов сайтов
- поиск зарубежных сайтов
- поиск SQL-инъекций
- поиск PHP-инъекций (кодовых)
- авторегистрация
- автоподтверждение почты
- отправка комментариев на DLE сайты
- проверка ТИЦ и PR, AlexaRank
- проверка количества страниц в индексе Яндекса и Google
- автоматический сбор поисковых фраз
[Ссылки могут видеть только зарегистрированные пользователи. ]


Описание - коппипаст с офф [Ссылки могут видеть только зарегистрированные пользователи. ]
Оригинальная [Ссылки могут видеть только зарегистрированные пользователи. ].
  Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Заявление об ответственности / Список мошенников

Часовой пояс GMT +4, время: 13:10.

Пишите нам: [email protected]
Copyright © 2024 vBulletin Solutions, Inc.
Translate: zCarot. Webdesign by DevArt (Fox)
G-gaMe! Team production | Since 2008
Hosted by GShost.net