Smoothing
Smoothing
Определение
Сглаживание (smoothing) — это методы оценки вероятностей n-грамм, которые предотвращают присваивание нулевой вероятности не встречавшимся в обучающих данных последовательностям. Они решают проблему разреженности данных путём перераспределения вероятностной массы от наблюдаемых n-грамм к ненаблюдаемым. К распространённым методам относятся additive smoothing, Kneser-Ney smoothing и Good–Turing smoothing.