Парсер для принятия решений по объемам закупок
Крупной фармацевтической компании, дистрибьютору лекарственных препаратов, медицинских изделий и техники необходимо оперативно получать информацию по изменениям в реестре лекарственных препаратов и фармацевтических субстанций: что добавлено в реестр, что удалено, что изменилось.
Как решается вопрос актуальности баз и сайтов, которые парсите?
Все же мы знаем, насколько нерегулярно все обновляют свои прайсы и ценники.
Глобально - никак не решается. Парятся те ресурсы, от которых нет возможности получать данные напрямую. Соответственно и влияния на людей, занимающихся обновлением данных, нет. Если есть информация о дате обновления - то смотрим на нее.
В примере из кейса, дата обновления есть в данных, поэтому проблем не возникало