Старый 13.11.2012, 00:21   #1
DimaSss
RAM 256MB
 
Аватар для DimaSss
 
Регистрация: 06.12.2009
Сообщений: 2,538
DimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспоримаDimaSss репутация неоспорима
DimaSss вне форума

По умолчанию X-Parser LIGHT – Парсер ко




X-Parser LIGHT – Парсер контента:
1. Парсить выдачу любых поисковых систем по ключевым фразам сохраняя сниппеты и ссылки.
2. Парсить контент (текстовый) с любого сайта по заданному домену.
3. Парсить контент (текстовый) по ключевым фразам из выдачи любой ПС.
4. Парсить контент (текстовый) по заданному списку URLов.
5. Парсить внутренние ссылки с любого URLа в частности или сайта в целом.
6. Парсить внешние ссылки с любого URLа в частности или сайта в целом.

1. Проверять прокси по заданному списку проксилистов.
2. Проверять прокси по списку проксей.
3. Проверять индивидуально любой прокси.
4. Отбирать из списка качественные проксилисты.
5. Парсить списки прокси из выдачи Google и отбирать качественные.

Производительность парсера:
Парсер контента X-Parser использует многопоточность. Скорость парсинга на мегабитном канале составляет примерно 160 секунд на 1 мегабайт чистого текста, т.е. 500 мегабайт в сутки!!!
Скорость проверки прокси составляет около 100 прокси за 100 секунд, то есть за 100 секунд будет найдено примерно 100 рабочих прокси.

X-Parser-LIGHT включает:
• Парсер сниппетов из выдачи поисковых систем;
• Парсер ссылок из выдачи поисковых систем;
• Парсер контента по списку ключевиков;
• Парсер контента по списку URL;
• Парсер контента по списку доменов (осуществляет парсинг контента сайтов на всю глубину);
• Парсер внутренних ссылок по списку доменов (парсит сайты на всю глубину и собирает все внутренние ссылки) ;
• Парсер внешних ссылок по списку доменов (парсит сайты на всю глубину и собирает все внешние ссылки) ;
• Проксичеккер;
• Чеккер проксилистов (отбирает качественные проксилисты из общего списка) ;
• Парсер картинок с [Ссылки доступны только зарегистрированным пользователям . Зарегистрируйся, чтобы увидеть ссылку.] (бесплатное дополнение, позволяет парсить изображения по запросам и изменять их размер под Ваши нужды);
Позволяет парсить Google, Yandex, Yahoo, Altavista, Aol, Bing. Имеет вывод текста без разметки (под дорвеи) и с разметкой (заголовки, абзацы) в формате Textkit и в собственном формате с разделителем <article>. Версия имеет минимум вынесенных настроек и идеально подходит для неопытных пользователей.

[Ссылки доступны только зарегистрированным пользователям . Зарегистрируйся, чтобы увидеть ссылку.]
Пароль на архив:[Ссылки доступны только зарегистрированным пользователям . Зарегистрируйся, чтобы увидеть ссылку.]

P.S. могут работать не все функции, но код открыт, если нужно дорабатываем под себя.
  Ответить с цитированием
Ответ

Опции темы Поиск в этой теме
Поиск в этой теме:

Расширенный поиск

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.



взломать аську аську взломать взлом программы сделать взлом программы как сделать взлом программы хакерские сайты как легко взломать аську лучшие хакерские сайты топ список хакерские сайты взлом паролей легкий взлом паролей

Powered by vBulletin® Version 3.8.5
Copyright ©2000 - 2009, Jelsoft Enterprises Ltd. Перевод: zCarot