Проект WWW-парсер.

 

phantomjs_256x256

Разработка системы www-парсинга. Система выполняет функции автоматизированного сбора данных с различных интернет каталогов, сайтов объявлений и подобных ресурсов.

В рамках работы над этим проектом была разработана уникальная платформа для www-парсинга, позволяющая подключить в процесс любой новый сайт всего за 2-5 дней. Даже если целевой сайт защищается от сканирования скрывая контактные данные авторов объявлений.

Система в полностью автоматизированном режиме определяет различные сложные ситуации возникающие в ходе работы, например блокировка системы со стороны целевого сайта, и выходит из них. Постоянно следит за обновлением объявлений и появлением новых.

На данный момент система не имеет своего пользовательского интерфейса. Все данные экспортируются в 1С заказчика.