Полный текст
SAGE: коррекция орфографии с помощью языковых моделейКоррекция правописания является одной из основополагающих задач в области Natural Language Processing. Достаточно прозаичная формулировка и кажущаяся жёсткой структура орфографической системы скрывают под собой нетривиальные внутриязыковые взаимодействия, являющиеся традиционно сложными для языковых моделей. В этой статье ребята из SberDevicesе рассказывают, как решали эту проблему и как это привело к созданию проекта по исследованию задачи коррекции текста, а также решения, опережающего модели OpenAI.