Все актуальные лоты torgi.gov.ru одним файлом

Уже как некоторое время интересуюсь приобретением распродаваемого на аукционах имущества. Существует множество независимых торговых площадок. Но все их лоты представлены на государственном ресурсе torgi.gov.ru, т.к. чем больше привлечённых участников, тем выше спрос. На торги выставляется практически всё — от бензопилы до многоэтажных оздоровительных комплексов.

Интересуемое на этом ресурсе можно найти через интерактивную форму, что не всегда удобно — может быть найдено слишком много или слишком мало объектов (присутствуют не все необходимые механизмы выборки), сложно осуществлять слежение. И если старая версия торгов в том или ином виде как-то приспособлена для быстрого перезапроса, то в новой этого нет, более того, теперь реализован постраничный принцип выдачи информации. От сюда появилась идея автоматически формировать список всех актуальных лотов в один файл из новой версии, ведь старая версия в скором времени будет больше недоступна.

torgi.zip — файл со всеми актуальными лотами, обновляется несколько раз в день. В нём представлена краткая информация по каждому объекту и две ссылки — на json (текстовый) файл с основной информацией и на оригинальную web страницу с полной информацией.

Вот прямо сейчас посмотрел бензопилы (ну не зря же есть про них упоминание), вижу, имеет смысл добавить в файл код региона, т.к. адрес в основной информации отсутствует. Изначальная мысль была визуально оформить месторасположение лотов на карте, но пока решил начать с малого :) В общем, пока предлагается черновой, но простой и вполне рабочий вариант для тех, кто готов немножко поковыряться с электронными таблицами. Да можно и просто в любом текстовом редакторе открыть, не так конечно будет удобно, но всё-же.

Если есть предложения к улучшению или замечания, высказывайте, за тем этот функционал и предоставляется в открытый доступ. Если будет желание приобрести для личного использования, обращайтесь, думаю сможем договориться — реализовано на Java и можно запускать как на ПК, так и на простом php хостинге, не говоря уж о специализированном.

Добавлено: отображение кодов региона и торговой площадки - могут быть пустыми; дату актуальности файла в имя файла в архиве.

0
20 комментариев
Написать комментарий...
Максим

А реально добавить кадастровую стоимость земли в файл?

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Не.. это накладно. Если ресурс pkk перестал тормозить, могу попробовать на него ссылку встраивать вместо текущего egrp365. pkk показывает кадастровую стоимость.

Ответить
Развернуть ветку
Максим
Ответить
Развернуть ветку
Сергей Коновалов
Автор

Надо будет глянуть - интересный вариант..

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Посмотрел, в ближайшее время делать не буду.
Выглядит примерно так:
# есть лот - https://torgi.gov.ru/new/public/lots/lot/21000001560000000098_13
# смотрим в данные заявки - https://torgi.gov.ru/new/api/public/notices/noticeNumber/21000001560000000098
# от туда достаём egrn id и переходим по ссылке - https://torgi.gov.ru/new/egrn/extract/?requestIds=21000001560000000098_13_1_24030814:08:09

Ответить
Развернуть ветку
Владислав Данилов

Отличная идея, пригодится!
Регион обязательно нужен 👍

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Совершенно верно подсказывают, сайт torgi.gov.ru предоставляет своего рода API для доступа ко всем публикациям через реестр. Данная реализация использует доступ ко всем (актуальным) лотам через имитацию запроса поиска. Ссылки вида /lots/lot/ идентичны /notices/view/, если откинуть окончание (номер лота) после символа подчеркивания (включительно).

Ответить
Развернуть ветку
Кирилл Чусов

Либо ослеп, либо плохо искал... Ткните ссылкой на описание API, пожалуйста

Ответить
Развернуть ветку
Сергей Коновалов
Автор

В прошлом году смотрел по чьей-то наводке, действительно была такая информация на сайте. Контакт удалился, и переписка вместе с ним :(

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Вот может здесь: https://torgi.gov.ru/new/public/infomaterials/reg в технических материалах. К примеру: Форматы информационного взаимодействия с ГИС Торги. АТФФ версия 1.1
Вот какая-то ссылка от туда: https://torgi.gov.ru/new/opendata/7710568760-notice/meta.json

Ответить
Развернуть ветку
John Pepper

Добрый день.Например этого объявления нет в таблице, но на сайте естьhttps://torgi.gov.ru/new/public/lots/lot/21000010510000000201_1

Ответить
Развернуть ветку
Сергей Коновалов
Автор

По вашей ссылке указан уже закрытый лот - несостоявшийся. В таблицу размещаются только предстоящие.

Ответить
Развернуть ветку
Alexander Levin

Подскажите, пожалуйста, как скачать такой файл самостоятельно? Хочу попробовать поиграться с разными столбцами

Ответить
Развернуть ветку
Сергей Коновалов
Автор

oriri.ru/trg/torgi.zip - ежедневно свежий файл. Если открывать экселем, то надо через импорт данных. Когда разрабатывал, открывал 'опенофисом', и не заметил, что что для MS получился не очень родной формат.

Ответить
Развернуть ветку
Дмитрий Мороз

Не подскажете, проект ваш еще жив?
через какое API вы список собирали?

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Судя по дате в файле архива - пока ничего не поломалось :)Говорят, там есть какое-то апи (последний раз когда спрашивали, не нашёл описание у них на сайте, а было), но мой вариант просто реализован на имитации действий пользователя, вот тут есть краткие наброски: https://oriri.ru/pishem-parser-dlya-sajta-torgi-gov-ru/

Ответить
Развернуть ветку
Дмитрий Мороз

А можете дать пример вызова curlа для получения текущего файла?

Ответить
Развернуть ветку
Максим

А

Ответить
Развернуть ветку
Roman Trubitsyn

добавьте дату в название скачиваемого файла

Ответить
Развернуть ветку
Сергей Коновалов
Автор

Сейчас это видно по дате файла в архиве. Не сложно добавить в имя файла в архиве, чтоб ссылка на скачивание оставалась постоянной.

Ответить
Развернуть ветку
17 комментариев
Раскрывать всегда