И кстати, проект GPT-Neo это попытка полностью повторить и бесплатно раздать людям знаменитый GPT-3 от openAI. Как верно замечают авторы проекта, довольно странно, что проект с платным API и закрытыми исходными текстами называется "open AI"
🙂 Но вообще пока-что GPT-Neo далеки от полного повторения GPT-3, думаю там еще работы на 3-4 месяца.
https://www.eleuther.ai/gpt-neo