Скажу скажем, и, наверное, это не будет неожиданностью, что универсального рецепта не существует. Да, мы нашли решение, пусть и не с первой попытки. Оно работает и на сайтах наших клиентов, но не на всех: одному проекту эта методика никак не помогла. Поэтому вынуждены заявить, что волшебной формулы, которая сразу гарантирует покорение первых строчек выдачи мы не дадим. Но расскажем о том, где искать решение, которое для каждого сайта — свое.
То есть как бы нету ни BM25, ни NLP, об LLM в Яндексе не знают - а знают про "академическую тошноту" из 19 века и всерьёз выясняют, уникальный текст или его у кого-то стырили?