Я спарсил наш любимый vc.ru. Краткие итоги за 2021 год

Под занавес уходящего года принято подводить итоги. В качестве учебного проекта я решил изучить доступные данные vc.ru и предлагаю вашему вниманию немного ознакомится с ними. Никакого анализа - только сухие цифры.

Для всех заинтересованных в конце статьи будет ссылка на базу, если не против администрация vc.

Немного о структуре vc.ru. Фактически портал состоит из подсайтов, которые бывают двух типов:

  • тематические - их 33 шт
  • официальные представительства компаний/персон - их 346 шт (они с галочкой).

Два важных замечания:

  • В этой статья я рассматриваю только материалы из первого типа подсайтов (у меня попросту не хватило времени и ресурсов).
  • В расчетах не учтены 3 последних дня 2021 г.

1. Всего за 2021г было опубликовано 32748 статей.

2. В общей сложности было написано 1 119 987 комментариев. Охотнее всего люди говорят про Офлайн, Транспорт и Еду. Ниже показаны средние значения по количеству комментариев.

3. Без сомнения, "Истории" - самые любимый формат публикации.

4. Самые популярные статьи (но правда по количеству голосов) легко найти используя функционал самого vc.ru.

Лидером по всем категориям оказалась первая статья Олега Тинькова. Остальное вы можете посмотреть самостоятельно.

5. Но рейтинг можно составить и по количеству комментариев. Самые резонансные публикации:

6. На выходных нужно отдыхать. vc.ru тоже немного отдыхает.

7. Ночью vc.ru тоже практически спит (фактически дремлит). Время по Москве.

8. И летом немного отдыхает. Май "просел" из-за майских праздников (см. п.12)

9. Самые продуктивные авторы в 2021 году. В т.ч. и редакторский состав vc.

Евгения Евсеева - 1331 публикаций
Маша Цепелева - 1108 публикаций
Nazigul Jusupova - 831 публикаций
Таня Боброва - 664 публикаций
Рая Хачатрян - 424 публикаций
TJ - 267 публикаций
Кабинет инвестора - 200 публикаций
Лиана Липанова - 160 публикаций
Евгений Делюкин - 157 публикаций
Seller Den - 140 публикаций

Полина Лааксо - 133 публикаций
Новости TJ - 127 публикаций
Борис Преображенский - 126 публикаций
StormGain - 123 публикаций
Black VR - 119 публикаций
DTF - 106 публикаций
StartupReviews - 100 публикаций
Делобанк - 98 публикаций
Findale.pro - 95 публикаций
Kirill Bychkov - 92 публикаций

10. Авторы, получившие наибольшее количество голосов (лайков) за 2021 год. Лайки за комментарии не учитываются.

Евгения Евсеева +33908 голосов
Маша Цепелева +30657 голосов
Таня Боброва +19191 голосов
Nazigul Jusupova +16835 голосов
Рая Хачатрян +11614 голосов
TJ +10333 голосов
Евгений Делюкин +10053 голосов
Лиана Липанова +9503 голосов
Полина Лааксо +7225 голосов
Новости TJ +5722голосов

11. Авторы, поймавшие больше всего хейта в 2021 году (со знаком минус). Дизлайки за комментарии не учитываются. Ссылки на страницы они попросили не указывать 😎

Максим Бондаренко -57 голосов
Зюзгинов Александр -41 голосов
Иван Бабайлов -36 голосов
Евгений Халепа -31 голосов
Олег Малышев -27 голосов
ZAMEDIA -26 голосов
Автомойки 150 bar -26 голосов
Сергей Грушка -24 голосов
Elena B -22 голосов
Здравомыслящий инвестор -22 голосов

11. Здесь не принято закидывать авторов дизлайками ... или да? Самые популярные оценки 0 и 1.

Думаю я еще добавлю интересные выводы, нужно покопаться в данных.

UPD: 12. На годовой диаграмме с общим количеством публикаций, четко прослеживаются выходные и праздничные дни (январь/декабрь, май, ноябрь). Линия тренда вверх. У vc дела идут в гору.

Если у читателей возникнет интерес к технической стороне вопроса: как была собрана информация и проанализирована - прошу написать об этом в комментариях, и я постараюсь подготовить развернутую статью.

UPD: API не использовалось, только классический подход парсинга вебстраниц.

UPD: меня упрекнули что я учитывал в том числе и штатных сотрудников vc.ru, поэтому я расширил список самых продуктивных авторов (пункт 9) до 20 человек, добавил ссылки на их страницы. Предлагаю вам самостоятельно определить кто из них имеет прямое отношение к vc, а кто "свободный" автор.

База в формате *.sqlite и *.csv размещена на моем GitHub

Спасибо vc.ru за возможность выражать мысли открыто. Всех с новым годом!

0
89 комментариев
Написать комментарий...
Товарищ

Интересна техническая сторона статьи.

Ответить
Развернуть ветку
Wezochy
Автор

Товарищи, плюсики поставьте, пожалуйста комментарию выше, кому интересно - все расскажу и покажу 👷

Ответить
Развернуть ветку
Sergey Ilyin

В чатиках по анализу данных выложили БД

Ответить
Развернуть ветку
Невероятный Блондин

Нахер штатных сотрудников рейтинговать, это неинтересно.

Я вообще ждал официального подведения итогов - по лайкам, по хейтам, по банам
Сколько народу добавило меня в черный список, например.

TJ неделю назад "Итоги" выкатили, а VC жмётся ((

Ответить
Развернуть ветку
color

Ну так на VC комменты это не основа, а просто дополнение к материалу. А на ТЖ это важная часть сообщества.

Ответить
Развернуть ветку
5 комментариев
Андрей Фролов

по комментариям (хейту, лайкам и банам) скорее всего не будем делать в этом году, такого постоянного движения как на TJ не было. В следующем году подумаем

Ответить
Развернуть ветку
10 комментариев
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
2 комментария
Dark Falcon

Где более интересная статистика, сколько раз например было жалоб на Ozon/МВидео/нужное подставить и сколько из жалоб было урегулировано? -)

официальные представительства компаний/персон - их 346 шт (они с галочкой)

Хотелось бы увидеть этот список, где будет название аккаунта/ссылка на профиль/id профиля
Ну и в идеале, желательно такой же список всех представителей компаний без галочки. Так как мы прекрасно знаем, что по большой то части, все представители которые отвечают на комментарии - не имеют галки.

Ответить
Развернуть ветку
душный тип

Чисто по ощущениям рейтинг самого интересного на vc:

- Кинул Тинькофф, угнали бабки.
- Кинул Яндекс, угнали бабки.
- Кинул Скилбокс,угналибабки.
- Кинул Озон, купил хуйню, не вернули бабки.

И так через день целый год.

Ответить
Развернуть ветку
Mike Ross

А альфа где? )

Ответить
Развернуть ветку
1 комментарий
Evil Pechenka

Я просто «Приёмную» в игнор отправил и всё, никто никого не кидает. 😊

Ответить
Развернуть ветку
4 комментария
Илья Калимулин

Я спарсил у ясеня...

Ответить
Развернуть ветку
Саша Антипов

Где моя любимая, спарсил не ответил мне...

Ответить
Развернуть ветку
2 комментария
Wezochy
Автор

Вот и я ждал-ждал итог, но пришлось самому замутить.😀
Штатных сотрудников не стал отсеивать - они тоже живые люди.

Ответить
Развернуть ветку
Андрей Фролов

Спасибо за работу и за пост! У нас ещё несколько отдельных итогов будут завтра и до конца праздников, соберём их с тегом #год2021

Ответить
Развернуть ветку
1 комментарий
Evil Pechenka

Это некорректно, редакционные статьи сразу выводятся в ленте и висят в анонсах. Не говоря уж о том, что человек за зарплату пишет по 3 статьи в день. О! Он продуктивный, как удивительно!

Это я и без всяких подсчётов могу сказать. В итоге весь топ у редакции. Как интересно (на самом деле нет).

Ответить
Развернуть ветку
Денис Демидов

Надо было их в отдельный список

Ответить
Развернуть ветку
Виктор

Итоги года 2021 на VC: Вы провели на сайте 23 дня, 5 часов 20 минут и 48 секунд.
А могли бы как Олег быть владельцем банка

Ответить
Развернуть ветку
Дмитрий Беговатов

Спасибо за данные! Очень интересно.

Мы в канале https://t.me/vchunt каждую неделю подводим итоги и выбираем лучшие проекты из «Трибуны». Если интересно следить за «русскоязычным Product Hunt» — подписывайтесь!

Ответить
Развернуть ветку
Аккаунт заморожен

Комментарий недоступен

Ответить
Развернуть ветку
Wezochy
Автор

Уточняю, что речь идёт про дизлайк под статьей, и только за 2021 год. Легко проверяется через ручной поиск автора.
Обратите внимание что ниже -5 нет ни у одной статьи. Поправьте меня если я ошибаюсь.

Ответить
Развернуть ветку
6 комментариев
Никита Шультайс

DEL

Ответить
Развернуть ветку
Alexander Solovyov

А чё приемная не первая? Непорядок!

Ответить
Развернуть ветку
Wezochy
Автор

Плюсую. Это уже предоставим официальным представителям vc

Ответить
Развернуть ветку
Dark Falcon

Просто списки представителей с галкой и без галки были ли очень полезны. Вот даже сейчас, я в одну из тем звал @Dmitry YandexEda Галки то у него нет. И это ещё хороший пример, так как у него хотя бы написано YandexEda. А у многих просто имя бывает. -) Поди пойми, из какой там кто компании, тем более, что бывают и шутники, которые говорят, что они представители компаний. -)) В пример приведу того же Дмитрия, который не хочет с нами общаться. И некоторые верят шутникам, потому что наш официальный Димка, ушёл в запой с 24 числа, и официального ответа нет. -))

Ответить
Развернуть ветку
2 комментария
Valeratal Val

Поделитесь спарсенным, пожалуйста. В научных целях

Ответить
Развернуть ветку
Wezochy
Автор

Ссылка в статье же есть, можно скачать без смс и регистрации.

Ответить
Развернуть ветку
7 комментариев
Финансовый консультант

На основе данных о днях недели и времени публикации можно предугадать время, когда публикация постов будет самой продуктивной)

Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Арсений

О, прикольно. Статья @Денис Демидов по налоги набрала больше всех комментариев. Она гигантская, конечно.

Ответить
Развернуть ветку
Vilent

Интересно было бы увидеть ТОП плюсовых и минусовых комментариев.

Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Wezochy
Автор

Спасибо 🤸

Ответить
Развернуть ветку
Wezochy
Автор

Всем спасибо, вы вывели пост в "полулярное" и прибили его там гвоздями🔨

Ответить
Развернуть ветку
Wezochy
Автор

Спасибо всем за обратную связь

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Софья Денисова

Цифры подкрипленные фактами, это интересно

Ответить
Развернуть ветку
Dmitry Ilyin

Малоаато дизлайков. Я ожидал в лидерах людей с несколькими сотнями за год увидеть

Ответить
Развернуть ветку
Светлана Завацкая

Конкурсы 0! Ну это аж печально как-то.

Ответить
Развернуть ветку
Михаил Баширов

Кайф, было интересно почитать

Ответить
Развернуть ветку
Зоя Евсеева

как понимать слово спарсил? собрал?

Ответить
Развернуть ветку
Wezochy
Автор

собирать и структурировать информацию, в данном случае с сайта. можно парсить, например документы или жесткий диск.

Ответить
Развернуть ветку
Aleksandr Oleynikov

Осталось выяснить сколько человек в команде Евгении Евсеевой. Скорее всего это постер. Даже орг.часть (коммуникация с авторами) уже делает кто-то другой . Ну и авторы.

Ответить
Развернуть ветку
Арсений Москаленко

Не, ну круто же! Спасибо тебе

Ответить
Развернуть ветку
Михаил

Просмотры интереснее всего. И пять в топе маловато. Хотя бы 10 или 20. Ну и вам уже писали, что редакцию надо отдельно, а то все статьи от них получились.

Ответить
Развернуть ветку
Wezochy
Автор

расширил список до 20 человек, теперь там есть обычные смертные

Ответить
Развернуть ветку
Денис

Любопытно просмотреть статистику, по графику видно, что конкурсов и опросов минимально, в Новом Году хотелось бы по участвовать.

Ответить
Развернуть ветку
Wera Ferat

"Количество публикаций по дням недели
Наплыв на вторник, среду и четверг - это скорее всего активируются представители компаний.

Ответить
Развернуть ветку
Сергей Рыбак

Малоцыфр

Ответить
Развернуть ветку
Wezochy
Автор

Функционал сайта позволяет вносить правки в статью только в течение первых суток, это конечно непорядок. Поэтому добавляю информацию в виде комментариев.

12. На годовой диаграмме с общим количеством публикаций, четко прослеживаются выходные и праздничные дни (январь/декабрь, май, ноябрь). Линия тренда вверх. У vc дела идут в гору.

Ответить
Развернуть ветку
Алексей Галкин

Интересно) Сам недавно зарегался. Вижу что сайт еще на плаву, это хорошо)

Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
86 комментариев
Раскрывать всегда