Новости МЛ простыми словами
слухи/сплетни
- начали подприжимать большие модели не выкладывая их в опенсурс. Скоро вообще все запретят, надеюсь торенты останутся
- блэкаут на реддит. Топовые сабреддиты в дауне, реддит пытается монетизироваться через платное обучение моделей, выставив ценник на апи. Для стартапов без миллионных инвестиций (без АИ в названии) ценник является заградительным (дестки млн/год для популярного клиента). Юзеры/модеры бастуют. Мне тяжело без реддита было собирать подборку
txt2txt
- Орка, обучение на объяснении, интересная бумага https://arxiv.org/abs/2306.02707
- Улучшение моделей в опенаи. Главное: 1. конского размера контекст (8k) - небольшой мануал можно засунуть. 2. Возможность программировать ответ в формате апи - проще интегрировать. 3. Подешевело (ничесебе, опенаи и так как бы недорог)
- ресеч от MS про бесконечную память. На шаг ближе к загрузить себя в модель (сингулярность, успей до моей старости пжлст) https://github.com/Victorwz/LongMem
- llama.cpp - поддержка куды, быстрее генерация на видюхах
- наш бывший лид МЛ прочтет обзор ЛЛМ моделей, 29-го июня https://www.linkedin.com/events/7072112208796602369/about/
- а если нет_сил_ждать заходите на https://github.com/Hannibal046/Awesome-LLM
video2video
- Zero Shot видео 2 видео - интересный пейпер изучу на досуге. Звучит клево - люблю когда без обучения.
UPD: Выглядит круто, но сорцов 0, может они премьером полировали (шучу, просто зажали думаю, слишком сладкий плод). Внутри, по описанию говно + палки. И это здорово: https://anonymous-31415926.github.io/
UPD2: Удалось воспроизвести консистентность, пример в подводке, описал идею в ишью https://github.com/deforum-art/deforum-stable-diffusion/issues/269
tutorials
- туториал как сгенерить видео деформации синхронизированные с аудио: https://t.me/whargarbl/415
- https://www.evidentlyai.com/ml-system-design - подборка постов о реальных МЛ системах в продакшене. Звучит круто на деле там вода водой обычно или адовый треш. «Мы к кафке прикрутили деревянную модельку 10 летней давности», ну а продакшен он такой, суровый.
крипота
- чувак с утверждениеми что НЛО есть вроде как достучался до закрытого слушания в конгрессе https://www.youtube.com/watch?v=4pQ_bBrLEec Я саммари читал - из интересного, НЛО != инопланетяне. Ватикан по уши в этом дерьме с 40-х годов. Пипец криповые ресечи, лол