Создание скейпера для анализа соцсетей и медиа-источников

Вот с чего я начал реализацию: сделал скейпер для всех существующих и важных социальных сетей и источников медиа:

пейперы с Архива, отсортированные по важности используя скрытый функционал AlphaLabs
новые репозитории с гитахаба, которым звездочку поставили релевантные люди
посты и фолоувинг новых актуальных аккаунтов в рамках важного мне кластера (ИИ) в твиттере
новые посты на HackerNews, ProductHunt, посты из дискорда.

Второй шаг: каждый дата поинт сначала анализируется дешевой ламой-8B через groq на предмет актуальности, а после умная модель (сейчас — Kimi) пишет анализ и сортирует по важности того на что нужно обратить внимание.

Подписывайтесь на Telegram e/acc.