Скрипты и программы BatchURLScraper - Извлечение данных методами XPath, CSSPath, XQuery и RegExp

[site_analyzer]

Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

Возможности программы BatchURLScraper:

• парсинг и извлечение данных по списку URL
• гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp
• модуль для тестирования правил парсинга
• экспорт отчетов в Excel (CSV-формат)

Страница скачивания (5 Мб): BatchURLScraper - XPath, CSSPath, XQuery, RegExp парсинг и извлечение данных с сайтов

Буду рад любым отзывам и пожеланиям по работе программы.

 

[Amney]

@site_analyzer c помощью вашей программы смогу из паблика вк выкачать более 10к картинок?

 

[site_analyzer]

@site_analyzer c помощью вашей программы смогу из паблика вк выкачать более 10к картинок?

Честно говоря не пробовал, могут быть проблемы с блокировкой от ВК

 

[Proxy-Solutions]

Proxy-solutions.net - Инновационный сервис по продаже прокси.
Быстрые и стабильные серверные и мобильные прокси.

- Ассотримент стран и городов (операторов связи для мобильных прокси).
- Протоколы/типы соединения HTTP/HTTP(s), SOCKS5, UDP, Shadowsocks/Shadowsocks(R), socks5+tls, trojan + tls.
- Широкий функционал сервиса и личного кабинета.
- Консультант на сайте/ круглосуточная поддержка.

Скидка 5% на все услуги сервиса по промокоду: piratehub

 

[Amney]

не пробовал

а что, если попробовать?=)

 

[site_analyzer]

а что, если попробовать?=)

Я только за, только потом плиз отпишитесь сюда - как прошло )

 

[Amney]

Я только за, только потом плиз отпишитесь сюда - как прошло )

это я вам предлагал=)

 

[site_analyzer]

это я вам предлагал=)

Так это ведь вам интересно, так вот и попробуйте )

 

[Amney]

Так это ведь вам интересно, так вот и попробуйте )

=) попробуем, что ж поделаешь

 

[site_analyzer]

Новая версия BatchURLScraper 1.3

Что нового:

• расширено число страниц для парсинга с 1000 до 5000 URL
• добавлена возможность скрапинга через HTML templates
• добавлена возможность извлечения данных через атрибуты CSS
• добавлена возможность скрапинга через внешний и внутренний HTML
• добавлена возможность использования списков Proxy
• исправлен баг некорректного сохранения User-Agent

Страница скачивания: BatchURLScraper - XPath, CSSPath, XQuery, RegExp парсинг и извлечение данных с сайтов