Участник:Aleksandra.Tokmakova
Материал из MachineLearning.
(→Отчеты о научно-исследовательской работе) |
|||
Строка 56: | Строка 56: | ||
|язык = russian | |язык = russian | ||
}} | }} | ||
+ | |||
+ | === Весна 2012, 8-й семестр === | ||
+ | '''Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков''' | ||
+ | |||
+ | ''Рассматривается задача выбора регрессионной модели. Предполагается, что вектор параметров модели − многомерная случайная величина с независимо распределёнными компонентами. В работе предложен способ оптимизации праметров и гиперпараметров. Приведены явные оценки гиперпараметров для случая линейных и нелинейных моделей. Показано как полученные оценки используются для отбора признаков. Предложенный подход сравнивается с подходом, использующим для лценки гиперпараметров аппроксимацию Лапласа.'' | ||
+ | |||
+ | '''Публикации''' | ||
+ | *{{Статья | ||
+ | |автор = Зайцев А.А. | ||
+ | |автор2 = Стрижов В.В. | ||
+ | |автор3 = Токмакова А.А. | ||
+ | |название = Оценка гиперпараметров регрессионных моделей методом максимального правдоподобия | ||
+ | |журнал = Информационные технологии | ||
+ | |год = 2012 | ||
+ | |номер = 11 | ||
+ | |ISSN = 1684-6400 (принято в печать) | ||
+ | |язык = russian | ||
+ | |url = | ||
+ | }} | ||
+ | *{{Статья | ||
+ | |автор = Зайцев А.А. | ||
+ | |автор2 = Токмакова А.А. | ||
+ | |название = Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков | ||
+ | |журнал = Машинное обучение и анализ данных | ||
+ | |год = 2012 | ||
+ | |номер = 3 | ||
+ | |ISSN = 2223-3792 | ||
+ | |язык = russian | ||
+ | |страницы = 347-353 | ||
+ | |url = http://mlalgorithms.svn.sourceforge.net/viewvc/mlalgorithms/JMLDA/2012no3/pdf/ZaytsevTokmakova2012Likelihood.pdf | ||
+ | }} | ||
+ | |||
+ | '''Доклад на научной конференции''' | ||
+ | *{{Статья | ||
+ | |автор = Токмакова А.А. | ||
+ | |название = Оценка ковариационных матриц параметров модели при восстановлении линейной регрессии | ||
+ | |журнал = XIX Международная конференция студентов, аспирантов и молодых ученых «Ломоносов», апрель | ||
+ | |год = 2012 | ||
+ | |язык = russian | ||
+ | |url = http://lomonosov-msu.ru/archive/Lomonosov_2012/structure_16_1797.htm | ||
+ | }} | ||
+ | |||
+ | '''Гранты''' | ||
+ | *«Оценивание гиперпараметров линейных регрессионных моделей при отборе шумовых и коррелирующих признаков», ПГАС | ||
=== Весна 2012, 8-й семестр === | === Весна 2012, 8-й семестр === |
Версия 11:57, 21 декабря 2012
МФТИ, ФУПМ
Кафедра "Интеллектуальные системы"
Направление "Интеллектуальный анализ данных"
Mailto: aleksandra-tok@yandex.ru
Отчеты о научно-исследовательской работе
Весна 2011, 6-й семестр
Выделение периодической компоненты из временного ряда
В проекте исследуется временной ряд на наличие периодической компоненты. На основе теории о рядах Фурье строится тригонометрическая интерполяция предложенных временных рядов методом наименьших квадратов. Также производится оценка параметров функции метода наименьших квадратов в зависимости от качества прогнозирования. В вычислительном эксперименте приводятся результаты работы корреляционной функции и метода наименьших квадратов на зашумлённом модельном синусе и реальном временном ряде электрокардиограммы.
Публикация
- Токмакова А.А. Выделение периодической компоненты из временного ряда // Машинное обучение и анализ данных. — 2011. — № 1. — С. 40-50. — ISSN 2223-3792.
Осень 2011, 7-й семестр
Получение устойчивых оценок гиперпараметров линейных регрессионных моделей
В работе решается задача отбора признаков при восстановлении линейной регрессии. Принята гипотеза о нормальном распределении вектора зависимой переменной и~параметров модели. Для оценки ковариационной матрицы параметров используется аппроксимация Лапласа: логарифм функции ошибки приближается функцией нормального распределения. Исследуется проблема присутствия в выборке шумовых и коррелирующих признаков, так как при их наличии матрица ковариаций параметров модели становится вырожденной. Предлагается алгоритм, производящий отбор информативных признаков. В вычислительном эксперименте приводятся результаты исследования на временном ряде.
Публикации
- Токмакова А.А. Получение устойчивых оценок гиперпараметров линейных регрессионных моделей // Машинное обучение и анализ данных. — 2011. — № 2. — С. 140-155. — ISSN 2223-3792.
- Стрижов В.В., Токмакова А.А. Оценивание гиперпараметров линейных регрессионных моделей при отборе шумовых и коррелирующих признаков // Информатика и её применения. — 2012. — № 4. — ISSN 1992-2264 (принято в печать).
Весна 2012, 8-й семестр
Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков
Рассматривается задача выбора регрессионной модели. Предполагается, что вектор параметров модели − многомерная случайная величина с независимо распределёнными компонентами. В работе предложен способ оптимизации праметров и гиперпараметров. Приведены явные оценки гиперпараметров для случая линейных и нелинейных моделей. Показано как полученные оценки используются для отбора признаков. Предложенный подход сравнивается с подходом, использующим для лценки гиперпараметров аппроксимацию Лапласа.
Публикации
- Зайцев А.А., Стрижов В.В., Токмакова А.А. Оценка гиперпараметров регрессионных моделей методом максимального правдоподобия // Информационные технологии. — 2012. — № 11. — ISSN 1684-6400 (принято в печать).
- Зайцев А.А., Токмакова А.А. Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков // Машинное обучение и анализ данных. — 2012. — № 3. — С. 347-353. — ISSN 2223-3792.
Доклад на научной конференции
- Токмакова А.А. Оценка ковариационных матриц параметров модели при восстановлении линейной регрессии // XIX Международная конференция студентов, аспирантов и молодых ученых «Ломоносов», апрель. — 2012.
Гранты
- «Оценивание гиперпараметров линейных регрессионных моделей при отборе шумовых и коррелирующих признаков», ПГАС
Весна 2012, 8-й семестр
Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков
Рассматривается задача выбора регрессионной модели. Предполагается, что вектор параметров модели − многомерная случайная величина с независимо распределёнными компонентами. В работе предложен способ оптимизации праметров и гиперпараметров. Приведены явные оценки гиперпараметров для случая линейных и нелинейных моделей. Показано как полученные оценки используются для отбора признаков. Предложенный подход сравнивается с подходом, использующим для лценки гиперпараметров аппроксимацию Лапласа.
Публикации
- Зайцев А.А., Стрижов В.В., Токмакова А.А. Оценка гиперпараметров регрессионных моделей методом максимального правдоподобия // Информационные технологии. — 2012. — № 11. — ISSN 1684-6400 (принято в печать).
- Зайцев А.А., Токмакова А.А. Оценка гиперпараметров линейных регрессионных моделей методом максимального правдоподобия при отборе шумовых и коррелирующих признаков // Машинное обучение и анализ данных. — 2012. — № 3. — С. 347-353. — ISSN 2223-3792.
Доклад на научной конференции
- Токмакова А.А. Оценка ковариационных матриц параметров модели при восстановлении линейной регрессии // XIX Международная конференция студентов, аспирантов и молодых ученых «Ломоносов», апрель. — 2012.
Гранты
- «Оценивание гиперпараметров линейных регрессионных моделей при отборе шумовых и коррелирующих признаков», ПГАС
Категории: Токмакова А.А. (публикации) | 2011 (публикации) | Машинное обучение и анализ данных (статьи) | Стрижов В.В. (публикации) | 2012 (публикации) | Информатика и её применения (статьи) | Зайцев А.А. (публикации) | Информационные технологии (статьи) | XIX Международная конференция студентов, аспирантов и молодых ученых «Ломоносов», апрель (статьи)