Модель для генерации легкой эротики Неплохо держит конекст, параметры для старта:

do_sample: true<br> top_p: 0.96<br> top_k: 14<br> temperature: 0.88 # Выше 1.2 - будет сильно уходить от контекста<br> repetition_penalty: 1.16<br> encoder_repetition_penalty: 1.09-1.15<br> typical_p: 1.0<br>

Для пользователей text-generation-webui

В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер. Ошибка такая:<br>

eos_token_id = eos_token_id[0] IndexError: list index out of range

Исправляется легко, в файл modules/models.py в функцию load_tokenizer() надо добавить строчку<br> <code>tokenizer.eos_token_id = 2</code><br> перед<br> <code>return tokenizer</code>