Искусственный интеллект. Машинное обучение - стр. 9
Допустим, у нас есть набор данных о ценах на жилье в определенном районе, и мы хотим создать модель, которая могла бы предсказывать цену новых недвижимостей. Мы начинаем с определения обучающей выборки, которая будет состоять из уже существующих данных о ценах на жилье в этом районе, а также информации о различных характеристиках каждого дома, таких как количество комнат, площадь, удаленность от центра города и т. д. Эта обучающая выборка будет использоваться для обучения нашей модели.
Обобщающая способность модели будет определяться ее способностью делать точные прогнозы для новых данных, которые не были включены в обучающую выборку. Например, после того как наша модель была обучена на основе данных о ценах на жилье в прошлом, мы можем использовать ее для предсказания цен на новые дома, которые появляются на рынке. Если наша модель успешно предсказывает цены на новые дома с точностью, сопоставимой с ее производительностью на обучающей выборке, это свидетельствует о ее высокой обобщающей способности.
Однако если наша модель показывает высокую точность на обучающей выборке, но низкую точность на новых данных, это может свидетельствовать о переобучении. Например, если наша модель очень хорошо запоминает цены на дома в обучающей выборке, включая шум и случайные факторы, она может показать низкую обобщающую способность, когда мы попытаемся предсказать цены на новые дома, чьи характеристики отличаются от тех, что были в обучающей выборке.
Математические модели и алгоритмы обучения составляют основу машинного обучения, предоставляя инструменты для анализа данных и принятия решений на их основе. Эти модели представляют собой математические формулировки, которые позволяют моделировать закономерности в данных и делать предсказания или принимать решения на их основе. Они могут быть различной сложности и структуры, в зависимости от конкретной задачи и характеристик данных.
Одним из наиболее распространенных типов математических моделей в машинном обучении является линейная регрессия. Эта модель используется для анализа взаимосвязи между набором независимых переменных и зависимой переменной и для предсказания значений зависимой переменной на основе значений независимых переменных. Линейная регрессия является примером метода обучения с учителем, где модель обучается на данных, для которых известны значения зависимой переменной, и затем используется для предсказания значений на новых данных.
Другой широко используемый тип моделей – это нейронные сети, которые моделируют работу человеческого мозга и состоят из множества взаимосвязанных узлов (нейронов). Нейронные сети способны обрабатывать сложные данные и извлекать сложные закономерности, что делает их особенно эффективными в таких областях, как обработка изображений, распознавание речи и анализ текста.
Одним из ключевых аспектов математических моделей и алгоритмов обучения является их способность обучаться на основе данных. Это означает, что модели адаптируются к изменениям в данных и улучшают свою производительность с опытом. Процесс обучения моделей может включать в себя такие методы, как градиентный спуск, стохастический градиентный спуск, метод опорных векторов и многие другие, которые позволяют оптимизировать параметры модели для достижения наилучшей производительности.