X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> BatchURLScraper - Извлечение данных XPath, CSS, RegExp
Chaser
Chaser
Topic Starter сообщение 17.11.2020, 20:08; Ответить: Chaser
Сообщение #1


Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

[img]https://site-analyzer.ru/pages/soft/buscr/buscr.png[/img]

[img]https://site-analyzer.ru/pages/soft/buscr/buscr-scrape-rules.png[/img]

[img]https://site-analyzer.ru/pages/soft/buscr/buscr-debug.png[/img]

Возможности программы BatchURLScraper:
[list]
[*:3w0ktivy]парсинг и извлечение данных по списку URL[/*:m:3w0ktivy]
[*:3w0ktivy]гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp[/*:m:3w0ktivy]
[*:3w0ktivy]модуль для тестирования правил парсинга[/*:m:3w0ktivy]
[*:3w0ktivy]экспорт отчетов в Excel (CSV-формат)[/*:m:3w0ktivy][/list:u:3w0ktivy]

Страница скачивания (5 Мб): https://site-analyzer.ru/soft/batch-url-scraper/

Буду рад любым отзывам и пожеланиям по работе программы.


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Chaser
Chaser
Topic Starter сообщение 26.11.2020, 19:24; Ответить: Chaser
Сообщение #2


Новая версия BatchURLScraper 1.3

[img]https://site-analyzer.ru/pages/articles/_single-articles/buscr/get-ga.png[/img]

[img]https://site-analyzer.ru/pages/articles/_single-articles/buscr/get-templates-counter.png[/img]

[img]https://site-analyzer.ru/pages/articles/_single-articles/buscr/buscr-settings.png[/img]

Что нового:
[list]
[*:je99t1ap]расширено число страниц для парсинга с 1000 до 5000 URL[/*:m:je99t1ap]
[*:je99t1ap]добавлена возможность скрапинга через HTML templates[/*:m:je99t1ap]
[*:je99t1ap]добавлена возможность извлечения данных через атрибуты CSS[/*:m:je99t1ap]
[*:je99t1ap]добавлена возможность скрапинга через внешний и внутренний HTML[/*:m:je99t1ap]
[*:je99t1ap]добавлена возможность использования списков Proxy[/*:m:je99t1ap]
[*:je99t1ap]исправлен баг некорректного сохранения User-Agent[/*:m:je99t1ap][/list:u:je99t1ap]

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Chaser
Chaser
Topic Starter сообщение 8.12.2020, 20:45; Ответить: Chaser
Сообщение #3


Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020:
[list]
[*:3uj0tktk]исправлена ошибка с валидацией HTML-темплейтов[/*:m:3uj0tktk]
[*:3uj0tktk]оптимизирована работа с регулярными выражениями[/*:m:3uj0tktk]
[*:3uj0tktk]добавлена возможность неучета повторений при скрейпинге[/*:m:3uj0tktk]
[*:3uj0tktk]исправлена проблема с учетом пауз между запросами[/*:m:3uj0tktk]
[*:3uj0tktk]диапазон пауз между запросами расширен до полутора минут[/*:m:3uj0tktk]
[*:3uj0tktk]доработан и улучшен перевод программы[/*:m:3uj0tktk]
[*:3uj0tktk]устранены утечки памяти[/*:m:3uj0tktk][/list:u:3uj0tktk]

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Интеграция спортивных данных API. Коэффициенты БК, Live результаты
15 yaroslav89 6860 8.4.2024, 17:17
автор: spoyer_ru
Открытая тема (нет новых ответов) ГОРЯЧИЕ FOREX|CRYPTO ЛИДЫ. БАЗЫ ДАННЫХ
[Чарджбек|Рекавери|Возврат]
9 Leado 3911 9.2.2024, 16:04
автор: baza0013
Открытая тема (нет новых ответов) Разработка/доработка сайтов Wordpress, HTML/CSS/JS
Вёрстка, перенос на WP, правки
9 malamut 3482 25.1.2024, 14:36
автор: malamut
Открытая тема (нет новых ответов) СОЗДАНИЕ : / САЙтЫ / ЛЕНДЫ / БОТЫ ТГ / ВАЙТЫ / КРЕО / СОФТЫ / ДИЗАЙН [PHP, JS, HTML/CSS] и другое
5 CULA 3416 19.12.2023, 18:55
автор: CULA
Открытая тема (нет новых ответов) Базы данных, различной тематики, выкладываем тут.
Делимся, обмениваемся, заказываем, парсим.
12 InfoObmen 15257 4.9.2022, 2:32
автор: Галецкая


 



RSS Текстовая версия Сейчас: 24.4.2024, 1:26
Дизайн