522 гр., по выбору. Спецкурс «Интеллектуальный анализ данных» (5 курс)
Место и время проведения: суббота, первая и вторая пары (09:30-12:50)
Преподаватель: Коробейников Антон Иванович
Программа курса¶
Темы состоявшихся занятий¶
Темы будущих занятий¶
- Линейные модели. Оценивание, проверка гипотез. Дисперсионный анализ как линейная модель. Анализ ковариаций
- Простейшие задачи классификации. Логистическая регрессия. LDA, QDA, naive Bayes. Понятие ROC-кривой, AUC
- Resampling: Кросс-валидация и бутстреп.
- Model selection: AIC, BIC, ridge regression, lasso.
- Робастная регрессия
- Деревья классификации и регрессии. Bagging, random forest, boosting
- Support Vector Machines
- Hidden Markov Models
- Обобщенные линейные модели (GLM)
- Probabilistic Graphical Models
- Нелинейности. Сплайны, GAM
- Методы уменьшения размерности - PCA, principal component regression, partial least squares
- Unsupervised learning. Кластеризация
Textbook¶
Introduction to Statistical Learning with R v2
Онлайн-лекции¶
Онлайн-лекции к курсу доступны на Stanford Online Содержание лекций (и соответствие с главами ISLR):
- Week 1: Introduction and Overview of Statistical Learning (Chapters 1-2)
- Week 2: Linear Regression (Chapter 3)
- Week 3: Classification (Chapter 4)
- Week 4: Resampling Methods (Chapter 5)
- Week 5: Linear Model Selection and Regularization (Chapter 6)
- Week 6: Moving Beyond Linearity (Chapter 7)
- Week 7: Tree-based Methods (Chapter 8)
- Week 8: Support Vector Machines (Chapter 9)
- Week 9: Unsupervised Learning (Chapter 10)
Домашние задания¶
- Глава 3 ISLRv2. Индивидуальные задания после главы 3 (Regression), до 20.03
- Глава 4 ISLRv2. Индивидуальные задания после главы 4 (Classification), до 27.03
- Глава 5 ISLRv2. Индивидуальные задания после главы 5 (Resampling), до 03.04
- Глава 6 ISLRv2. Индивидуальные задания после главы 6 (Regularization), до 10.04
- Глава 8 ISLRv2. Индивидуальные задания после главы 8 (Trees), до 17.04
- Глава 9 ISLRv2. Индивидуальные задания после главы 9 (SVM), до 24.04
Prerequisites¶
Дистрибутив R:
Редакторы и оболочки:
Рекомендуемая литература¶
Книги¶
- Peter Dalgaard. Introductory Statistics with R. Springer, 2002.
- John Maindonald and John Braun. Data Analysis and Graphics Using R. Cambridge University Press, Cambridge, 2003.
- John Verzani. Using R for Introductory Statistics. Chapman & Hall/CRC, Boca Raton, FL, 2005.
- Paul Murrell. R Graphics. Chapman & Hall/CRC, Boca Raton, FL, 2005.
- Шипунов А.Б., Балдин Е.М., Волкова П.А., Коробейников А.И., Назарова С.А., Петров С.В., Суфиянов В.Г. Наглядная статистика. Используем R! – М.: ДМК Пресс, 2012. – 298 с. PDF
- Роберт И. Кабаков R в действии. Анализ и визуализация данных в R. – М.: ДМК Пресс, 2013. – 280 с.
Статьи¶
- John Maindonald. Using R for Data Analysis and Graphics - Introduction, Examples and Commentary. PDF
- John Verzani. Simple R. PDF
- Petra Kuhnert and Bill Venables. An Introduction to R: Software for Statistical Modelling & Computing. ZIP
- David Rossiter. Introduction to the R Project for Statistical Computing for Use at the ITC. PDF
- Е.М. Балдин, А.И. Коробейников, А.Б. Шипунов Анализ данных с R www
Задачи¶
Условные обозначения:
- Цифра в клетке - порядковый номер “подхода”. Наличие цифры означает, что решение было получено, проверено, и результат отослан обратно.
- Решетка - задание запрошено и выдано, плюс - зачтено, звездочка - штраф (сдано после дедлайна), минус - хм, незачет ;-)
Кроме того, пишется дата и время.
** Внимание:** Если напротив Вашей фамилии отсутствует назначенное задание, то для его получения Вам следует отправить запрос по почте.
| Regression | Classification | Resampling | Regularization | Trees | SVM | Зачет | |
|---|---|---|---|---|---|---|---|
| Морозов | + | + | + | + | + | + | B |
| Гриненко | + | + | + | + | + | + | A |
| Романов | + | + | + | + | +* | +* | C |
| Михайлов | +* | +* | +* | +* | +* | +* | E |
| Хасанова | + | + | + | + | + | + | B |
| Сенов | III.13 | IV.14 a-g | V.9 | VI.10 | VIII.11 | IX.7 | |
| Логинов | + | + | + | + | + | + | A |
| Смирнов | +* | +* | +* | +* | +* | +* | E |