Парсер уклонившихся участников Госзакупок

На сайте госзакупок zakupki.gov.ru предоставлена информация о тендерах и их результатах. Если ваши клиенты — участники госзакупок, победившие в тендерах и признанные уклонившимися, вы можете найти их данные на этом сайте.

Разработанная нами программа-парсер ZakupkiGovRuEvadersParser берёт заданные вами ссылки на сайт госзакупок, ведущие на список тендеров. В ссылках она заменяет дату публикации на ту, которую вы установили в настройках выгрузки. Открывает ссылку на список тендеров, и если там более 1000 тендеров — автоматически разбивает один поиск на несколько более мелких по более коротким интервалам дат (сайт Госзакупок не выдаёт более 1000 тендеров в одном списке).
Затем программа начинает заходить в каждый тендер, открывает там вкладку «Вложения», открывает раздел «Протоколы работы комиссии», и ищет среди них протоколы об уклонении, отказе в заключении, расторжении (по ключевым словам «Уклон», «Отказ», «Расторж»). Если такой протокол найден, парсер идёт в протокол подведения итогов, открывает вкладку «Список заявок», находит там строку со статусом «Победитель», раскрывает данные о нём и выгружает все собранные данные в файл.

При этом, задача парсера — показывать закупки с новыми протоколами! При каждом запуске программа запоминает увиденные протоколы, и при следующем запуске определяет, какие протоколы являются новыми, и выводит данные только по ним!
То есть, каждый раз программа ходит по одним и тем же тендерам, но выводит данные только по новым найденным протоколам уклонившихся участников!

Программа умеет работать с параметрами командной строки, что позволяет запускать её через планировщик Windows, и автоматизировать поиск новых уклонившихся участников. В параметрах командной строки можно указать параметр pubdate, например равным lastmonth. В этом случае, при запуске парсер заменит даты публикации в заданных на входе ссылках на те, которые соответствуют дате месячной давности, и будет делать поиск по этому интервалу.
Если запускать программу с параметрами командной строки, парсер стартует автоматически и после завершения работы закрывается.

В архиве с демо-версией есть лог выгрузки полной версии, там вы можете найти все детали алгоритма на конкретных примерах.

Программа очень проста в использовании и имеет интуитивно понятный интерфейс.

Результатом сбора являются такие файлы: пример файла выгрузки информации об уклонившихся участниках госзакупок, формируемой парсером.

Файл Excel с данными об уклонившихся участниках госзакупок

После завершения работы программы файл с результатами можно найти в папке программы. Его можно открывать в Excel (если установлен MS Office) или Calc (если установлен OpenOffice), или автоматически импортировать в вашу информационную систему. Файл имеет имя вида data***.csv.

Данные, собираемые парсером, становятся доступны еще до завершения работы программы: сразу после получения новых подходящих данных, идёт запись в файл выгрузки.