{"id":4200,"title":"\u0411\u0435\u0441\u043f\u043b\u0430\u0442\u043d\u044b\u0439 \u0442\u0435\u0441\u0442-\u0434\u0440\u0430\u0439\u0432 \u0433\u0430\u0434\u0436\u0435\u0442\u043e\u0432 Apple \u0438 \u0434\u0440\u0443\u0433\u043e\u0439 \u0442\u0435\u0445\u043d\u0438\u043a\u0438","url":"\/redirect?component=advertising&id=4200&url=https:\/\/vc.ru\/promo\/257710-korotko-konferenciya-apple-tech-business-week&hash=789e97e8f976b8cb46ac87188977078aca31dc1c19d26cbaad0a3f744216d415","isPaidAndBannersEnabled":false}
Трибуна
Oleg bot

Как я решил сделать систему коллаборативной фильтрации постов из пабликов «Телеграма» на основе машинного обучения

И сделал: OLEG AI

Идея

В мире наступает революция ИИ, и в какой то момент мне стало казаться, что без меня она наступить не сможет. Поэтому я нашел курс по программированию нейросетей на Питоне Fast.AI, и решил придумать себе небольшой проект, чтобы поучиться на практике.

Я люблю Телеграм. И люблю иногда потупить в какую-нибудь ленту «информационного корма». В разное время я любил поразлагаться на Лепре, Дёти, Пикабу, но в итоге всеми этими источниками сладкого яда я остался недоволен.

И тогда я подумал: в Телеграме ведь куча источников, но Телеграм их не агрегирует по типу Фейсбука. Телеграм не собирает с нас лайки. Да, лайки это чистое зло и гореть им в аду, но иногда так хочется лайкнуть жопу фотомодели, нет?

А рекомендательные сервисы — это одно из направлений ML. А Телеграм — открытая система. Должно быть не сложно, подумал я. Оказалось чуть сложнее чем я думал, но получилось.

Стоит заметить, что я не профессиональный программист, и опыта в программировании у меня не было примерно с 2004 года. Так что, помимо собственно нейросетей, мне пришлось еще и быстренько расчухать основы Питона, вспомнить SQL, погрузиться в Докер и практику CI/CD. Это было потрясающе.

Процесс

Начал я с того, что убедился, что задуманное мной в принципе возможно.Мне нужно было слушать некий набор каналов (пабликов) Телеграма, и передавать посты подписчикам бота. Поизучал доки Telegram Bot API, понял, что при помощи одного только Telegram Bot API сделать это не получится. Бот не может подписываться на каналы по своему выбору.

Придется писать своего клиента для Telegram. К счастью, с нуля писать не пришлось: есть неплохая основа в виде либы python-telegram. Апишка там не самая проработанная, но самое тяжелое она делает за нас: процесс логина, предоставляет классы для создания запросов и получения асинхронных ответов от TDLib. TDLib это сишная либа-Телеграм-клиент. Так что я вооружился доками от TDLib, и принялся ковырять ее. Заодно разобрался как работает Телеграм, прикольно.

Я завел доску miro.com, чтобы накидывать туда идеи, рисовать схемы. Например, схему БД я нарисовал там. Оказалось очень удобно для маленького проекта — всё в одном месте и в то же время не мешает.

Как я представлял себе то, что хочу сделать:

Довольно быстро я накидал приложение, схема которого в итоге оказалась примерно такой:

Блоки — объекты.

Admin — это обычный аккаунт Телеги, залогиненный через TDLib и подписанный на интересующие нас каналы. Слушает апдейты каналов и записывает. Причем он не пишет контент, а только метаданные сообщения: tg_channel_id и tg_msg_id. По этим двум полям можно найти любое сообщение в Телеге (если оно было показано аккаунту).

Bot — аккаунт бота, общение с которым тоже происходит через TDLib (до этого я даже не знал, что так можно, думал, что только через Bot API можно работать с ботом). К ним подключены TDLibUtils — всякие методы для работы с TDLib низкого уровня. Типа, найти юзера, найти сообщение, вытащить имя канала из инфы о канале и тп.

OlegDBAdapter — методы для работы с базой (get_users, get_posts etc)

OlegNN — то, ради чего всё затевалось — алгоритм коллаборативной фильтрации. Правда, по итогу никакой нейросети там внутри не осталось, но об этом позже.

Joiner — логика подписки на каналы. Нельзя так просто взять список каналов и подписаться на него: быстро срабатывает рейт лимитинг. На вычисление безопасной логики подписки, логирование, организацию базы ушло около недели.

APScheduler — сторонняя либа-планировщик тасков. Использую для периодической рассылки сообщений подписоте.

Контент

Схемы работы с контентом могло быть две:

  • забирать контент каждого сообщения, хранить его, и собирать из него сообщение для подписчика по запросу. Плохо, тк придется качать и хранить кучу контента. Ладно бы текст, но там еще и медиа
  • не хранить контент, а забирать его из Телеграма по необходимостив идеале — не выкачивать медиа, а придумать, как его передавать юзеру прямо внутри Телеграма. Этот вариант и реализовал, правда, пришлось помаяться.

Чтобы не выкачивать медиа, в Телеграме у каждого ассета есть свой уникальный айди. Когда собираешь сообщение, можно вместо файла указать этот айди. Я думал, что этого достаточно, но посты не отправлялись. Оказалось, дело в том, что аккаунт отправляющий медиа с помощью айдишника, должен сначала этот айдишник встретить в Телеграме. Например, получить сообщение с этой картинкой. Проблема в том, что у меня за получение сообщений отвечает аккаунт Admin, а за отсылку — Bot. Я долго думал, и в итоге придумал: а что, если каждое полученное сообщение Админ будет форвардить Боту, таким образом Бот «увидит» всё медиа. Это сработало. Я боялся, что за такое количество форвардов поймаю рейтлимит и огребу гемморой, обходя это дело, но в итоге обошлось.

Каналы

Не мудрствуя лукаво, я купил список топовых каналов по количеству подписчиков у TGStat.ru. 45 категорий по 100 каналов, вышло 4500 каналов. Пока этого хватает, возможно допишу еще паука, который сам лезет в каналы упомянутые в постах, и подписывается на них. Я сразу сделал логику Joiner’а так, чтобы можно было легко докинуть ему в пул свежих каналов, а он с ними сам разберется.

С каналами уперся в неожиданный лимит: один аккаунт Телеграма может быть подписан только на 500 каналов. Придется теперь превращать Admin’а в хаб, управляющий несколькими аккаунтами, и добавлять аккаунты, следить какой аккаунт подписан на какой канал, и всё в таком духе. Пока отложил это, решил, что для старта 500 каналов хватит.

Нейросеть, которой нет

Затевал я всё это ради практики программирования нейросетей, как вы помните.

Когда внедряешь машинное обучение, сталкиваешься с тем, что это всё-таки черный ящик, у которого наружу торчат некие гиперпараметры, а на выходе получается какой-то результат, причем, если при разработке ты правильно учел всякие там размерности тензоров и не наделал глупых ошибок, оно будет работать. Как-то будет. Будет ли результат, выдаваемый ящиком, иметь какой-то смысл — это вопрос. Чтобы ответить на этот вопрос, приходится сидеть, расковыривать ее так и эдак, смотреть на результаты разных этапов вычисления, читать тематические статьи, узнавать практику, прикидывать baseline результат и сравнивать с тем, что получилось у тебя. Короче, это весело. На первых этапах машинное обучение создает гораздо больше проблем, чем решает. И заставить его реально решать какие то проблемы, создавая прибавленную стоимость для вашего проекта — большая работа, не очень похожая на обычное программирование и дебаг.

Так что трижды подумайте, прежде чем бросаться решать проблемы этим методом. ML требует жирных проблем, которые точно не решаются классическими методами и сулят повышенный профит. ML ради ML истощает бюджеты и роняет мораль!

Прежде чем прикрутить ML к Олежке, я долго крутил системы коллаборативной фильтрации на тренировочном датасете MovieLens (ой, только не надо).Я делал решение как для задачи регрессии (в конце один нейрон который угадывает рейтинг фильма по шкале 1..5), так и для задачи классификации (в конце 5 нейронов, каждый отвечает за свой рейтинг 1..5, и какой нейрон сильнее активируется, тот рейтинг мы и считаем за предсказание).Эти изыскания заняли прилично времени, кажется 2-3 недели. По ходу дела я даже с нуля написал классификатор MNIST, благодаря чему сильно продвинулся в понимании работы нейронок. Кто еще не делал этого: очень рекомендую. Времени занимает от силы 2 дня, а пользу приносит годами.

В итоге стало ясно, что если задачу рассматривать как регрессию (а не классификацию), предсказательная сила модели будет намного лучше, так я и сделал.

В основе механизма у меня эмбеддинги. Кто не в курсе — читаем дальше, кто знает — может промотать следующий раздел.

Embeddings

Идея простая, но гениальная: каждой сущности (юзеру, посту) ставится в соответствие вектор параметров. Например, K=10 параметров. Они еще называются латентные факторы (latent factors).Получается, что если у нас N юзеров, то мы можем расположить все вектора друг под другом, и получить тензор формы (, K). Матрицу из N рядов и K колонок, если по-колхозному.Для постов получится такой же тензор, только другой.Эти тензоры называются эмбеддингами.Cистема спрашивает у алгоритма фильтрации: вот есть юзер U, пост P, предскажи мне рейтинг, который юзер поставит посту.В самом простом варианте (без нейронки) мы ищем в тензоре юзеров нужный ряд соответствующий юзеру, в тензоре постов — вектор поста, и перемножаем эти два вектора (как в школе). На выходе получается скаляр (число) — это и есть предсказанный рейтинг.В варианте посложнее, эти два вектора подаются на вход нейросети, и дальше сигнал продвигается уже механизмом нейросети. На выходе — один нейрон, величина активации которого — скаляр — и есть предсказанный рейтинг.

Почему эти тензоры назвали отдельным словом «эмбеддинг», что в них особенного? Дело в том, что эмбеддинг — это первый шаг вычисления результата работы нейронки.Когда мы ищем нужный ряд для юзера или поста в тензоре, мы могли бы просто взять индекс нужного ряда, и вытащить вектор соответствующий этому индексу. Но операция «взять ряд по индексу» не является алгебраической, это программатик-операция работы с памятью. Это означает, что данная операция разрывает граф вычислений градиента нейросети. Градиент можно вычислить только для алгебраических операций. То есть, во время обучения механизм back propagation не сможет дойти до самого конца — непосредственно до эмбеддинга. Как же быть?Вместо того, чтобы брать ряд тензора по индексу, мы можем умножить этот тензор на one-hot-encoded vector. Например, нам нужен третий по счету ряд тензора. Умножаем тензор на вектор [0 0 1 0 ...] На выходе получаем нужный нам ряд тензора. Это алгебраическая операция (умножение тензора на тензор), она не ломает граф вычислений! Но это компутационно дорогая операция. Каждый раз так умножать GPU замучается. Поэтому в PyTorch и других пакетах нейровычислений есть специальный компутационный шорткат для эмбеддингов, который с одной стороны и граф вычислений не ломает, и компутационно дешев.

Где же взять эмбеддинг? Допустим, у нас есть обучающий датасет: энное количество оценок, которые юзеры поставили постам.Давайте проинициализируем эмбеддинги случайным образом, и для каждой оценки из датасета будем вычислять предсказание и сравнивать с оценкой. У нас получатся некие дельты, на этих дельтах мы и будем обучать нейросеть и эмбеддинги с помощью стохастического градиентного спуска (SGD).

В итоге через несколько эпох обучения (эпоха — проход всего датасета) наши эмбеддинги из случайных превратятся в обученные, и будут иметь некий смысл.

Каждый из параметров эмбеддинга действительно приобретает некий смысл. Какой — не совсем понятно, да и не нужно понимать. Будем считать, что этот смысл ведом только самой системе рекомендаций. Для нас главное, что в итоге система работает: рекомендует юзерам более релевантные посты. А какой «смысл» она видит в этих постах — какая разница?

Длина вектора латентных параметров

Число параметров K — какое оно должно быть? Лучший ответ, что мне удалось найти, был в этой статье: A social recommender system using item asymmetric correlation Если коротко, единого ответа нет, всё зависит от глубины сложности ваших item’ов, постановки задачи, функции потерь, короче, от всего. Rule of thumb: 5 — маловато, 50 — многовато, где-то посередине — в самый раз. Надо пробовать: смотреть, насколько гладко обучается модель, не провоцирует ли выбранное количество параметров переобучение, обучается ли модель вообще.

Я выбрал K=13

Где нейросеть?

Поиграв некоторое время с разными конфигурациями, я понял что для моей задачи регрессии оценки в диапазоне 0..1 лучше всего подходит конфигурация без нейросети. У меня просто перемножаются эмбеддинги. В таком варианте, без глубинного обучения, обучение происходит гораздо быстрее и плавнее. В данном случае проще оказалось лучше.

Обучение

Самый большой мой просчёт в архитектуре был связан с тем, что я думал, будто результаты обучения — очень ценная инфа, и её надо хранить персистентно, на диске в виде бинарника или в базе. Я написал код, который сохраняет вектора для каждого поста и юзера в базу в виде BLOB’а. Написал, потестил время выполнения, оказалось, что процесс обучения занимает 1-2 секунды, а процесс записи результатов — около минуты. Сама модель занимает в памяти 52 мегабайта для 1 млн постов. Так и зачем вообще сохранять ее в памяти? В любой момент можно обучить ее с нуля за пару секунд. Пришлось переписать.

Вот так выглядит процесс обучения. По вертикали — ошибка, по горизонтали — номер мини-батча:

Мини-батч — это некоторое число оценок, которые одновременно подаются на вход модели для обучения. В моем случае batch_size = 512. Каждый пик — это старт обучения с нуля. Видно, как по мере обучения падает ошибка.

Вот так выглядит инференс (процесс предсказания) модели:

Каждая точка — это пост из базы. По вертикали — предсказанная оценка. Из 11 115 постов всего 338 имеют предсказанную оценку выше 1, из них в итоге модель и выберет тот пост, который попадет юзеру в ленту.

Обучение с нуля и инкрементное обучение

Когда переходишь от игрушечных моделей для учебы к реальной модели для проекта, возникают вопросы:

  • Как быть, если приходит новая оценка от юзера? Стартовать обучение сразу, или ждать N новых оценок?
  • При получении новой оценки, обучать модель «на старые дрожжи» (инкрементно), то есть взять те веса и эмбеддинги, которые есть, и на них натравить датасет из новых оценок? Или просто переобучить всё с нуля?

Когда передо мной встали эти вопросы, беглый поиск ответов мне ничего не принес, поэтому я вооружился здравым смыслом и практикой. Соображения у меня были такие:

  • Инкрементное обучение плохо тем, что если запускать только его, и никогда не обучать с нуля, параметры застревают в некой области значений. Кривая обучения становится очень резкой. На практике это означает, что при поступлении новых данных и запуске инкрементного обучения, несколько эпох ошибка почти не меняется, потом делает резкий скачок вниз или вверх, и потом опять стоит как вкопанная. Это — очень нездровая ситуация, если вы столкнулись с таким, ищите как сделать обучение гладким, вплоть до переформулирования задачи как таковой.
  • Обучение «с нуля» почти ничего нам не стоит, поэтому не надо этого стесняться.
  • Глядя в будущее, можно предположить, что когда-нибудь у Олежки скопится датасет из 1 млн оценок, который будет занимать заметное время на обучение (десятки секунд). Юзеров будет достаточно много, и при получении каждой новой оценки запускать обучение с нуля мы не сможем.

Поэтому я сделал интерфейс и для инкрементного обучения, и для обучения с нуля. И написал логику, которая запускает полное обучение раз в N циклов инкрементного. А также сделал таймаут между циклами обучения. Всё это вынесено в конфиг. По мере взросления сервиса я смогу легко поменять эти настройки.

Холодный старт и взросление сервиса

Если вам доводилось читать о рекомендательных системах, вам должно быть известно, что одной из самых больших проблем в них является «холодный старт» и бутсртап свежего юзера. Холодный старт — это когда в системе в принципе мало оценок, а свежий юзер — это юзер, о вкусах которого мы ничего пока не знаем.Действительно, если в системе мало оценок (и много постов), как ее ни обучай, данных будет недостаточно, чтобы выученные эмбеддинги имели какой-то смысл. Рекомендации продуцируемые этой системой будут малорелевантными.Со свежим юзером похожая проблема.Как решить эти вопросы? Единого решения не существует. Все пользуются здравым смыслом и той информацией, которая доступна.Например, для свежего юзера мы можем сделать некий опросник (так сделано в Netflix), который сможет быстро сообщить нам хоть что-то о юзере, чтобы сделать первый опыт пользования системой не ужасным.Я решил, что опросник для Олежки будет слишком тяжеловесным решением, юзеры хотят просто тыкать лайки, а не отвечать на вопросы типа «ваш любимый цвет». Поэтому я решил так: первые 30 постов, которые Олежка присылает юзеру, я выбираю из числа тех, которые максимально нравятся всем. Говоря строго, они имеют максимальный bias.

Железо

Сейчас Олежка работает на самом дешевом инстансе Digital Ocean ($5/мес), без GPU. База расположена на этом же инстансе, в другом докер-контейнере. Думать о скейлинге пока рановато.

Итог

Олежка стабильно работает, перестал жрать память и чувствует себя хорошо.Юзеров пока маловато, так что, пожалуйста, лайк-шер. Можно просто шерить посты из ленты друзьям в Телеграме.

Больше юзеров — релевантнее рекомендации!

{ "author_name": "Oleg bot", "author_type": "self", "tags": [], "comments": 39, "likes": 27, "favorites": 69, "is_advertisement": false, "subsite_label": "tribuna", "id": 243954, "is_wide": false, "is_ugc": true, "date": "Sun, 09 May 2021 20:08:31 +0300", "is_special": false }
0
39 комментариев
Популярные
По порядку
Написать комментарий...
5

Стоит заметить, что я не профессиональный программист, и опыта в программировании у меня не было примерно с 2004 года.

ушло много времени, 2-3 недели

Прибедняетесь на протяжение всей статьи 😄
Диплом Физтеха, да?

Ответить
7

МГТУ )
Абсолютно не хотел прибедняться, по сравнению с профессиональным разработчиком я трачу на задачи в 2 раза больше времени, да еще и ухожу на виражи чтобы прочухать какую-то технологию, которую профессионалу положено знать. Слава богу надо мной нет эффективного менеджера который вселял бы в меня комплексы.

Ответить
0

МГТУ Майкоп чтоль?

Ответить
2

1. При нажатии на "не нравится" можно удалять пост из ленты бота. А то один мусор в итоге висит.
2. Посты старые (многие недельной давности), не актуальные для телеграм. Я в телеграм захожу читать только самое свежее (максимум 1 день от роду). 
3. И пока мне ничего действительно интересного не попалось. В основном, всякий хлам предлагает. Может стоит каталогизировать по тематике и опросить, какие темы мне интересны?
4. В итоге что по описанию, что по результату бот не для людей сделан, а просто показать всем, какой вы типа крутой и вникли быстро в тему с нейронками и в практику по лимитам телеграм (можно было погуглить, что есть лимиты для "юзеров" в количество тем и т.д.). Кроме сложного tdlib есть простой mtproto и не обязательно мучать себя пайтоном. Есть либы под разные языки.
5. В общем без указания конкретных практик по расчётам рейтингов или кусков кода с нейронками выглядит слабовато. Внутрянку мы не видим, а снаружи неэффективный, похожий на другие аналоги (есть и другие такие боты) инструмент.

P.S. Спасибо в любом случае за статью. Читать было намного интереснее, чем тыкать в кнопочку "💩".

Ответить
2

1. При нажатии на "не нравится" можно удалять пост из ленты бота. А то один мусор в итоге висит.

Был такой вариант, но я решил не удалять, не люблю когда ленту переколбашивают. В моем понимании лента мессенджера - это не то же что страница сайта, то есть она должна быть более-менее консистентная, содержать историю взаимодействия

2. Посты старые (многие недельной давности), не актуальные для телеграм. Я в телеграм захожу читать только самое свежее (максимум 1 день от роду).

Думаю что я сокращу окно выдачи постов до нескольких дней

3. И пока мне ничего действительно интересного не попалось. В основном, всякий хлам предлагает. Может стоит каталогизировать по тематике и опросить, какие темы мне интересны?

Нужно поставить 100-200 оценок чтобы пошли более релевантные рекомендации. И сам механизм я еще докручиваю.

5. В общем без указания конкретных практик по расчётам рейтингов или кусков кода с нейронками выглядит слабовато. Внутрянку мы не видим, а снаружи неэффективный, похожий на другие аналоги (есть и другие такие боты) инструмент.

https://github.com/Alphafluffykitten/OlegAInn

Код с модели с обучением

Ответить
1

ещё бы третью кнопку "спам!" ибо помимо некачественного контента полно спам-мусора, который очень сильно раздражает.

Ответить
2

По итогу получился телеграм-тикток. Бесконечная лента рандомных постов и никакого смысла, кроме убийства времени.

Ответить
2

Well yes, but actually no

Ответить
0

интересно как получилось, что этот пост имеет высокий bias. Спасибо за фидбек

Ответить
0

Скажем так, из 23 постов (два одинаковых) только 3 можно назвать хоть сколько нибудь релевантными и интересными. С натяжкой, но можно ¯\_(ツ)_/¯ 

Ответить
1

Спасибо за код. Правда, без привязки к описанию не особо интересен.
По поводу удаления: реально удобно, когда я вижу подборку того, что мне понравилось. Мало того, что интересно, так ещё и играет роль "избранного" - можно в любой момент зайти и полистать (найти что-то). А в виде списка "ненужного" оно не надо.

Ответить
0

Думаю что вы правы, возможно так и сделаю, подумаю

Ответить
1

ещё бы третью кнопку "спам!" ибо помимо некачественного контента полно спам-мусора, который очень сильно раздражает. то есть если я нажал "спам!", то этот контент вообще под запретом у меня. можно даже банить канал.

Ответить
1

Олег, добрый день. Очень интересная статья. Понравился ваш подход к работе. Хочу пригласить в наш проект. Мы делаем платформу для людей читающих бумажные книги. Напишите мне, пожалуйста, https://t.me/DenisStark77

Ответить
1

Забавно, что даже в полностью хронологической ленте Телеграм, которую изначально все любили и противопоставляли алгоритмическому ФБ и Инсте, пользователи устают от инфошума и всё равно стремятся в фильтрацию контента алгоритмом и пути ФБ) 

Ответить
0

Просто это еще один взгляд на контент, который пользуется спросом определенного количества людей

Ответить
0

очень сложно не свалиться в формат контента Яндекс.Дзена, там тоже спросом пользуется) 

Ответить
1

Рекламу и бессмысленые посты лучше откидывать, и все таки делать обучение без скачков, а только на улучшение.

Ответить
1

Неплохо было добавить категории, например путешественник, которому не интересна политика, чтобы он видел только инфу о путешествиях

Ответить
0

Жалко ‘по колхозному’ было всего одно, остальное не понятно, но наверное очень умно. Плюсую

Ответить
0

Сам думал о такой теме, но так и не собрался сделать. :) Вы молодец! Не очень понятно как коллаборативная матрица справляетсч с новыми постами. Новости выходят постоянно и у новой новости не будет ни одного лайка?

Ответить
1

новый пост наследует эмбеддинг у 100 предыдущих постов с этого канала, усредняя их.
Спасибо вам!

Ответить

Комментарий удален

0

На самом деле прям очень даже не плохо!
Статья правда (по-моему) не в той категории, хотя это ведь личный опыт)

Процесс расписан доходчиво (для меня) и даже реализация не плохая (нет предела совершенству)

По поводу работы пока ничего сказать не могу, только начал бота гонять и мало данных для оценки.

А сколько времени на реализацию (от идеи и до финала) у вас ушло?

Ответить
0

Поскольку я параллельно учился и много чего переделывал на ходу, ушло много. Около 4 месяцев. 

Ответить
1

С учётом всего описанного не так уж и много) Так держать!)

Ответить
0

Обязательно нужна возможность удалять из выдачи каналы. Зачем подкидывать инфу из каналов, которые в принципе неприятны или неинтересны? К примеру после прокрутки доброй сотни постов мне все ещё вылещает куча того же футбола. А его на дух не переношу. Я бы удалил профильные каналы из выдачи для себя, да вот не могу.
Эта особенность, даже если она пропадает через какое-то время, после составления портрета, будет отпугивать многих еще на этапе знакомства с ботом.

Ответить
0

Прокрутил уже значительно больше 200. Все еще куча спама, рекламы тренингов и футбола. Много ватного контента.
Мало юмора, it новостей, интересных фактов и в целом развлекательного контента.
Возможно, я просто не подхожу под список пабликов.
Мне бы ещё подобный бот пригодился для порнухи, но это уже совсем мечты))) 

Ответить
1

После просмотренного мириада рекомендаций с сожалением заявляю. Пока-что это фигня на постном масле. Либо выборка очень неудачная, либо вкус автора слишком специфичный. У меня практически одни и те же паблики постоянно. Притом, что многие из них я только дизлайкаю. Как будто в списке бота их всего штук 20. И многие из постов, это лютый мусор. Регулярно предлагает, к примеру, посты из какой-то золотой чихуа. Они представляют собой просто куски некачественных фотографий каких-то рандомных людей. Новости тоже не релевантные. Про спам я уже упоминал.

Ответить
0

Согласен, как раз работаю над улучшением того, что вы описали

Ответить
0

Максимум спама дает некий источник "distantsiya".

Ответить
0

а есть ли бот который скачивает все видео из тик-тока от определенного пользователя, или по хештегу

Ответить

Комментарий удален

0

А ведь неплохая статья!
Но.... Мы вам перезвоним.

Ответить
0

есть аналогичные боты на ИИ в телеграмм, только не по постам работают, а по финансам @UpsilonBot 

Ответить
0

Автор,поправь, эмбединг не "противопоставляется" сущности, а скорее "ставится в соответствие"

Ответить
0

Интнрнсная статья, только немного сумбурно написано.

Ответить
0

Добрый вечер, а не могли бы вы мне написать в телеграм @alexey330 есть пару вопросов

Ответить
Читать все 39 комментариев
Заметил в приложении «Тинькофф» страховку, оформленную на незнакомого человека — все его данные и документы доступны

Зашел сегодня в приложение банка и обнаружил, что у меня продуктах появилась страховка имущества. Оказалось, что она оформлена на неизвестного мне человека.

В Alser майнят криптовалюту на продаваемых ноутбуках

Заметил, что в зале стоит гул, думал, где-то работает пылесос, убираются, но чем ближе подходил, тем сильнее убеждался, что звук исходит от стойки с игровыми ноутбуками.

Как прокачать команду, компанию и экологию: акселератор, который понравился бы Кофи Аннану

Рассказываем о простом и классном проекте, благодаря которому METRO развивает сотрудников и генерирует инициативы по устойчивому развитию.

Умер Джон Макафи, создатель антивируса McAfee — его нашли мёртвым в тюремной камере Статьи редакции

По предварительным данным, он совершил самоубийство.

Два месяца без UGC контента. Что стало с Зайцами?

Как мы уже сообщали ранее, два месяца назад мы приняли решение удалить UGC контент с нашего сайта и приложений.

Московские рестораторы попросили власти перенести введение «бесковидного режима» для ресторанов с 28 июня на 1 августа Статьи редакции

И предложили пускать посетителей на летние веранды без QR-кодов.

Основатели южноафриканской криптобиржи Africrypt пропали вместе с биткоинами пользователей на $3,6 млрд Статьи редакции

В апреле они объявили о «взломе» платформы и попросили пользователей не обращаться к юристам.

Привычки и установки, которые «убивают» вас как профессионала и человека

...Правильнее, конечно, было бы перечислять в обратном порядке — человека и профессионала, потому что установки и черты характера первичны, но раз уж мы на профессиональном ресурсе, то будем соблюдать политес… :-)

«Тестовое задание ничего не значит» и другие принципы, которые помогут определить кандидата мечты

Всем привет. Меня зовут Кирилл. Два года назад я пришел в IT-компанию Nutnet на позицию HR. Релевантного опыта не было совсем. Поэтому первыe полгода я просто не вывозил, а во вторые — увеличил штат компании в 2 раза. Расскажу о принципах, которые помогли мне пробить потолок и привлечь «своих» людей в условиях жесткого хантинга в IT.

Что внутри у Алены: разбираем чат-бота по косточкам
У Timepad появился раздел «сервисы»: кому и зачем это нужно

Timepad обновляется. Вслед за сменой бизнес-модели и введением подписного формата работы с организаторами мы улучшаем внутренний функционал платформы. Цель последнего изменения — легкость работы по созданию событий на Timepad. Мы постоянно кастомизируем и улучшаем наши сервисы и продукты для того, чтобы организаторы получали новые опыты и…

Комментарии
null