Машинное обучение и анализ данных. Линейные модели. Логистическая регрессия презентация

Содержание

Обзор предыдущей лекции Кривые обучения

Слайд 1Машинное обучение и анализ данных
Лекция 9. Линейные модели. Часть 2.
Логистическая регрессия


Слайд 2Обзор предыдущей лекции
Кривые обучения


Слайд 3Содержание


Нелинейное преобразование(обобщение)

Логистическая регрессия


Слайд 4Нелинейное преобразование


Слайд 5Цена, которую мы платим за нелинейное преобразование


Слайд 6Два линейно неразделимых случая


Слайд 7Первый случай
Два способа решения:

1) Использовать линейную модель для Ein>0

2) Положить Ein=0

и
использовать нелинейное
преобразование в пространстве
высокого порядка

Слайд 8Второй случай
Перейти к преобразованию


Или лучше:

Или:

Или даже:


Слайд 9Логистическая регрессия

1) Модель

2) Мера ошибки

3) Алгоритм


Слайд 10Линейные модели


Слайд 11Логистическая функция
«Мягкий порог»





Функция θ интерпретируется как вероятность


Слайд 12
Данные (x,y), где y бинарная функция, генерируются «шумной» ЦФ





Функция

- вероятность

Изучаем


Слайд 13Мера ошибки. Метод максимального правдоподобия
Правдоподобие

определяется

Слайд 14Максимизируем правдоподобие

Минимизируем







«кросс-энтропийная» ошибка


Слайд 15Как минимизировать Ein?



Метод градиентного спуска


Слайд 16Как выбрать направление


Слайд 17Какая длина шага?










Слайд 18Простое применение
Вместо






Используем

С фиксированным η



Слайд 19Алгоритм логистической регрессии


Слайд 20Обзор линейных моделей


Слайд 21Использованные источники
Yaser Abu Mostafa “Learning from Data: Introductory Machine Learning Course”,

CalTech University, 2012 . - https://www.youtube.com/playlist?list=PLnIDYuXHkit4LcWjDe0EwlE57WiGlBs08


Обратная связь

Если не удалось найти и скачать презентацию, Вы можете заказать его на нашем сайте. Мы постараемся найти нужный Вам материал и отправим по электронной почте. Не стесняйтесь обращаться к нам, если у вас возникли вопросы или пожелания:

Email: Нажмите что бы посмотреть 

Что такое ThePresentation.ru?

Это сайт презентаций, докладов, проектов, шаблонов в формате PowerPoint. Мы помогаем школьникам, студентам, учителям, преподавателям хранить и обмениваться учебными материалами с другими пользователями.


Для правообладателей

Яндекс.Метрика