Отметьте шаги, из которых состоит предобработка текстов для нейросетей.
- Замена токенов на их номера в обучающей выборке
- Построение словаря
- Токенизация (графематический анализ)
К сожалению, у нас пока нет статистики ответов на данный вопрос,
но мы работаем над этим.