Издательство Manning анонсировало выход новой книги, которая фокусируется на важных, но часто упускаемых аспектах систем машинного обучения: оценке и настройке. 'Evaluation and Alignment: The Seminal Papers' от Ханчунга Ли предлагает читателям свежий взгляд на трудные вопросы, касающиеся определения успешности моделей и того, как ее измерять.
Книга рассматривает эволюцию методов оценки от поверхностных метрик до более сложных подходов, основанных на семантическом сходстве и оценках качества. Ханчунг Ли подчеркивает, что оценка должна определяться на этапе проектирования системы, а не добавляться в конце, что позволяет избежать разрыва между теорией и практикой.
Эта работа также вводит циклический процесс, включающий определение ключевых показателей успеха, их оценку и анализ неудач. Этот подход особенно актуален в условиях продакшена, когда необходимо сбалансировать полезность, безопасность и согласованность выводов модели.
Для читателей сообщества r/MachineLearning предусмотрена 50% скидка по коду MLLEE450RE. Эта книга станет полезным инструментом для практиков, стремящихся улучшить свои модели и повысить качество вывода.