GPT-3 можно обучить на основе русской литературы, русской и английской «Википедии», новостных сайтах и сайтах с вопросами и ответами и другого.
Кстати поболтать с Нейромозгом на GPT3+ можно в Телеграм:
@AnotherMindBot