Домашнее расследование о возможной краже данных проектом Finrange
В России отношение к интеллектуальной собственности, да и наверное к чужому труду – поразительно странное. Знаменитые "да кому я нужен?", "да что нам будет?" словно напутствующие лозунги начинающего предпринимателя.
Нижесказанное, это моё личное рассуждение и оно возможно ошибочно. И до тех пор, пока это нет доказывающих обратное фактов, мне хотелось бы показать на живом примере, как небольшие проекты воруют данные у сайтов покрупнее. Речь пойдёт о сайте Finrange, который, если я прав, украл данные о дивидендных выплатах у известного ресурса и, возможно, делает это на постоянной основе. Итак, история одного скучного вечера...
Так сложилось, что обратил внимание на пришедшее вчера письмо от Finrange о том, что они добавили функцию отраслевого анализа в карточки эмитентов. Обычно удаляю, а тут что-то стало интересно.
Это аналогия инструмента Finviz Bubbles (https://finviz.com/bubbles.ashx), но адаптированного под конкретную компанию и с расширенным набором метрик. Но вот незадача, как пример, Finrange указал компанию Micron: https://finrange.com/company/NASDAQ/MU/industry-analysis Увидев на странице раздел Дивидендов, стало интересно, а что же там? Micron ведь их не платит. Открываю и вижу, что последняя информация о дивидендах, датируется 1996 годом, а самая первая, аж... 1991 годом.
Хм, странно. Откуда у них данные за 1991 год? В рамках работы над своим небольшим хобби, мне приходилось связываться с каждой компанией, которая занималась продажей дивидендной информацией в коммерческих целях. И, если не ошибаюсь, ни одна не говорила о том что имеет в наличии данные за 30 летнюю историю выплат. 25 – было, а вот 30 – не припомню.
Да, могу ошибиться или мне, как мелкому игроку рынка, предоставили не полную информацию. Бывает всякое, но допустим что не соврали. Окей, откуда тогда дровишки? Варианта три:
- официальные данные с официального сайта компании Micron (https://investors.micron.com)
- официальные данные с сайта Комиссии по Ценным бумагам США (https://www.sec.gov)
- украдены с других сайтов (ссылки будут ниже)
На официальном сайте такой информации нет. SEC, т.е. комиссия по Ценным бумагам, показывает информацию только до 1994 года, и то, только в не форматированном виде. Вот пример квартальной отчётности за 1994 год: https://www.sec.gov/Archives/edgar/data/723125/0000723125-94-000010.txt А я очень сомневаюсь, чтобы Finrange так заморочился.
Окей, если предположить что всё-таки данные не куплены, то остаётся понять, у кого же они их украли?
Чтобы ответить на этот вопрос, нужно просто поискать, а у кого вообще есть такие же данные? Обычно такие вещи находятся из-за ошибки. Когда тот, у кого воруют - допускает ошибку, и тогда эта ошибка появляется у каждого вора. Здесь вряд ли такое будет, поэтому просто посмотрим у кого что есть.
Итак, мне удалось найти всего 4 сайта, которые показывают дивидендную информацию компании Micron с 1991 года:
1. Ycharts: https://ycharts.com/companies/MU/dividend Подходит? Да, но не верится.
2. DividendInvestor: https://www.dividendinvestor.com/dividend-history-detail/mu/ Подходит? Да, но думаю это не тот сайт, чтобы с него собирать данные, немного не удобно (технические детали опущу).
3. Dividata: https://dividata.com/stock/MU/dividend Подходит? Да и это возможный кандидат.
4. GuruFocus: https://www.gurufocus.com/stock/MU/dividend?search=mu Тоже подходит
5. Digrin: https://www.digrin.com/stocks/detail/MU/ Не подходят. Сайт молодой, скорее всего сами у кого-то украли.
6. DividendInformation: https://www.dividendinformation.com/MU_dividends/ Не подходят. Данные на сайте о Micron с 1991 года, но тоже у кого-то украдены, потому то размерность чисел задана некорректно. То есть показывают, что в 1991 году выплата была 0.00$, хотя по факту - 0.005$. А значит именно с этого сайта украсть не могли.
Вот и всё. Во всём Google, если я хорошо искал - есть только шесть сайтов с настолько полной информацией о дивидендах Micron. Из них получается, что у нас четыре кандидата. Однако, уберём Dividata, потому что они показывают только экс-дивидендную дату, а у Finrange - даты две, одна называется «Последний день покупки акций», а вторая «Дата закрытия реестра акционеров»
Значит остаются трое:
- Ycharts – думаю не подходит из-за платности ресурса, и закрытия ряда функций для незарегистрированных пользователей.
- DividendInvestor – тоже не уверен что он, сугубо из-за технических заморочек, они решаемы, но зачем возиться, если можно найти место, где всё проще.
- GuruFocus – самый подходящий вариант, потому что если собирать данные о дивидендах у него, то можно попутно украсть и другую информацию. Это ведь удобно, не правда ли? Проверить это можно одним путём - если найти ещё какое-то совпадение между кандидатом и целевым сайтом. Finrange уже большой сайт, поэтому вряд ли они расчёты тоже воруют, так делают чаще совсем маленькие ресурсы, поэтому скорее всего зацепок не найти при беглом поиске.
Поначалу думаю, где же они могли проколоться, где же главный ключик?… И тут мои глаза падают на график доходности на GuruFocus.
Етижи-пассатижи! Пресвятые драконы и гремучие змеи! Якорь тебе в глотку, ондатра ты тоскливая!!! Это похоже оно!
Проверяю, можно ли вытащить данные с графика и оказывается, что всё можно и очень даже просто.
Ладно, возможно я ошибаюсь и проверим на другой компании. Кто у нас там дивидендный аристократ, выплачивающий дивиденды 50 лет? Верно, Johnson & Johnson. И вот тут Finrange снова попадает впросак: из трёх кандидатов, только у одного есть такие же данные, как и у них - это Gurufocus.
Таким образом, я выдвигаю предположение, что Finrange украли данные о дивидендах с сайта GuruFocus. А раз так, то есть вероятность, что и другие данные этот проект тоже ворует с Gurufocus и продаёт выдавая за свои. И я бы наверное прошёл мимо и не обратил бы внимания, если бы так поступил небольшой сайт, работающий бесплатно, но когда так поступают коммерческие проекты, то появляется желание написать пост. Как этот.
P.S. Без рекламы и очень редко пишу всякую чушь в Telegram: https://t.me/a2_finance_bada_bing Также, как хобби, делаю сайт про дивиденды и фондовый рынок: a2-finance.com Собственно, только из-за того, что занимаюсь дивидендами, я и обратил внимание на наличие такой информации у большого проекта.
Александр спасибо за чёрный пиар! Приятно видеть недобросовестных конкурентов, которые сначала переписываются, общаются нормально, а потом нож в спину!
Если вам не удалось выйти на нормальных поставщиков данных - это ваша проблема! А мы не занимаемся кражей, у нас есть все договора, все чеки о покупке данных, мы работает полностью открыто и официально! Вам не приходило в голову, что у нас могут быть одни и те же поставщики данных?
Забавно, что пытаясь выехать за счёт нас, вы ещё несколько молодых сервисов, о которых мы ни разу не слышали обвини в краже данных!
Рисующий на бумаге Микки Мауса – не конкурент Walt Disney.
Если вы считаете что я неправ (а я несколько раз об этом упомянул, что это предположение, а не прямое обвинение), то укажите компанию поставщика данных здесь в комментариях и тарифный план. Это поможет подтвердить, что вы имеете право на публикацию подобных данных в коммерческих целях, а не используете аналогию Developer-план, как у Quandl, когда данные купить можно, но публиковать нельзя.
Полностью поддерживаю finrange. В статье чистая клевета
Спасибо. Всегда приятно видеть поддержку от своих пользователей!
Сегодня зарегистрировались и написали первый комментарий именно здесь?))))
Проблема, помимо отношения к интеллектуальной собственности, о чём упомянул автор в статье, ещё в отсутствии института репутации в РФ. И чем крупнее компания (Сбер, Озон, Яндекс и тп) — тем больший болт она будет класть на мелкие проблемы. Пока люди активно не начнут голосовать рублём, а это, к сожалению, с каждым годом всё труднее — ибо "экосистемы" пожирают всё вокруг. Тот же Яндекс в недалеком прошлом был только поисковиком. А теперь и такси, и магазин, и билеты на поезд...
Отсюда, когда людям плевать на репутацию, такие едкие комментарии под этим постом. "Мы можем все документально подтвердить, но мы вам ни чем не обязаны", "Разговор окончен".
Вы можете представить, что напишите в какой-нибудь GS или Морган, спросив, ребят, а вы где дату берёте, и он вам завернёт "отрадно наблюдать, что у вас есть столько свободного времени...". Тьфу.
Из исторического образования в своей альма-матер я вынес довольно банальную вещь — "критика источника". Всегда нужно проверять происхождение информации, наличие первоисточника, в данном случае данных. Если это невозможно по конфиденциальным причинам — сослаться на положение и извиниться. "Мы не можем разгласить эти данные согласно пункту.." и т.п. А они про "нож в спину" и "не обязаны" — ну детский сад.
Александр, ерунды не напишет! Знаю этого товарища.