Спецсеминар "Байесовские методы машинного обучения"/осень 2014

Материал из MachineLearning.

(Различия между версиями)
Перейти к: навигация, поиск
(→Расписание семинаров)
 
(18 промежуточных версий не показаны.)
Строка 1: Строка 1:
{{Main|Спецсеминар "Байесовские методы машинного обучения"}}
{{Main|Спецсеминар "Байесовские методы машинного обучения"}}
-
В осеннем семестре 2014 г. спецсеминар проходит на ВМК по пятницам в ауд. 637, начало в 18-10.
+
В осеннем семестре 2014 г. спецсеминар проходит на ВМК по пятницам в ауд. 526б, начало в 18-10.
== Расписание семинаров ==
== Расписание семинаров ==
Строка 13: Строка 13:
| 12 сентября 2014
| 12 сентября 2014
| ''Кириллов Александр'', аспирант ВМК<br> '''Стохастическое обратное распространение ошибки и приближенный вариационный вывод<br/> в глубинных генеративных моделях'''
| ''Кириллов Александр'', аспирант ВМК<br> '''Стохастическое обратное распространение ошибки и приближенный вариационный вывод<br/> в глубинных генеративных моделях'''
-
| [http://jmlr.org/proceedings/papers/v32/rezende14.pdf Статья (pdf)]
+
| [[Media:Stochastic_backprop.pdf | Презентация (pdf)]]<br> [http://jmlr.org/proceedings/papers/v32/rezende14.pdf Статья (pdf)]
|-
|-
| 19&nbsp;сентября&nbsp;2014
| 19&nbsp;сентября&nbsp;2014
| ''Осокин Антон'', ассистент ВМК<br> '''Deconvolutional nets, Визуализация свёрточных сетей'''
| ''Осокин Антон'', ассистент ВМК<br> '''Deconvolutional nets, Визуализация свёрточных сетей'''
-
| [http://www.matthewzeiler.com/pubs/arxive2013/arxive2013.pdf Статья 1 (pdf)] [http://www.matthewzeiler.com/pubs/cvpr2010/cvpr2010.pdf Статья 2 (pdf)]
+
| [[Media:DeconvSlides.pdf | Презентация]]
 +
[http://www.matthewzeiler.com/pubs/arxive2013/arxive2013.pdf Статья 1 (pdf)] [http://www.matthewzeiler.com/pubs/iccv2011/iccv2011.pdf Статья 2 (pdf)]
 +
[http://nips.cc/Conferences/2013/Program/event.php?ID=4188 Tutorial]
|-
|-
| 26&nbsp;сентября&nbsp;2014
| 26&nbsp;сентября&nbsp;2014
| ''Гитман Игорь'', студент 3-го курса ВМК<br> '''Max-Margin Boltzmann Machines'''
| ''Гитман Игорь'', студент 3-го курса ВМК<br> '''Max-Margin Boltzmann Machines'''
-
| [http://faculty.ucmerced.edu/mhyang/papers/cvpr14_mmbm.pdf Статья (pdf)]
+
| [[Media:Mmbm-final.pdf | Презентация (pdf)]]<br> [http://faculty.ucmerced.edu/mhyang/papers/cvpr14_mmbm.pdf Статья (pdf)]
|-
|-
| 3&nbsp;октября&nbsp;2014
| 3&nbsp;октября&nbsp;2014
-
| ''Родоманов Антон'', студент 4-го курса ВМК<br> '''Переворот в прикладной математике, вызванный MCMC'''
+
| ''Родоманов Антон'', студент 4-го курса ВМК<br> '''Марковские цепи и спектральная теория'''
-
| Название будет уточняться<br> [http://math.uchicago.edu/~shmuel/Network-course-readings/MCMCRev.pdf Статья (pdf)]
+
| [[Media:RodomanovMarkovChainsSlides.pdf | Презентация (pdf)]]<br> [http://math.uchicago.edu/~shmuel/Network-course-readings/MCMCRev.pdf Статья (pdf)]
|-
|-
| 10&nbsp;октября&nbsp;2014
| 10&nbsp;октября&nbsp;2014
-
| ''Фигурнов Михаил'', аспирант ВМК<br> '''Сверточные сети для семантической сегментации'''
+
| ''Фигурнов Михаил'', аспирант ВМК<br> '''Сверточные сети для семантической сегментации изображений'''
-
| Название будет уточняться<br> [http://jmlr.org/proceedings/papers/v32/pinheiro14.pdf Статья 1 (pdf)] [http://www.cvc.uab.es/lamp/pdfs/2014CVPRWsegmentation.pdf Статья 2 (pdf)]
+
| [[Media:FigurnovCnnSegmentationSlides.pdf | Презентация (pdf)]] <br> [http://jmlr.org/proceedings/papers/v32/pinheiro14.pdf Статья 1 (pdf)] [http://www.cvc.uab.es/lamp/pdfs/2014CVPRWsegmentation.pdf Статья 2 (pdf)] [http://publications.idiap.ch/downloads/reports/2014/Pinheiro_Idiap-RR-13-2014.pdf Статья 3 (pdf)]
|-
|-
| 17&nbsp;октября&nbsp;2014
| 17&nbsp;октября&nbsp;2014
-
| ''Чистяков Александр'', студент 4-го курса ВМК<br> '''Expectation Propagation'''
+
| ''Соболевский Андрей Николаевич'', зам. декана по научной работе ФКН ВШЭ <br> '''Обобщения центральной предельной теоремы на распределения с "тяжёлыми хвостами"'''
-
| Название будет уточняться
+
|
 +
|-
 +
| 24&nbsp;октября&nbsp;2014
 +
| ''Чистяков Александр'', студент 4-го курса ВМК<br> '''Expectation Propagation на примере TrueSkill, часть 1'''
 +
| rowspan=2|[[Media:Chistyakov_ep_trueskill.pdf‎ | Презентация (pdf)]] <br> [http://arxiv.org/ftp/arxiv/papers/1301/1301.2294.pdf Статья 1 (pdf)] [https://www.seas.harvard.edu/courses/cs281/papers/minka-divergence.pdf Статья 2 (pdf)] <br> [http://machinelearning.wustl.edu/mlpapers/paper_files/NIPS2006_688.pdf Статья 3 (pdf)] [http://machinelearning.wustl.edu/mlpapers/paper_files/NIPS2007_931.pdf Статья 4 (pdf)]
 +
|-
 +
| 31&nbsp;октября&nbsp;2014
 +
| ''Чистяков Александр'', студент 4-го курса ВМК<br> '''Expectation Propagation на примере TrueSkill, часть 2'''
 +
|-
 +
| 7&nbsp;ноября&nbsp;2014
 +
| ''Бартунов Сергей'', аспирант ВЦ РАН<br> '''Стохастический вариационный вывод'''
 +
| [[Media:BartunovSVISlides.pdf‎ | Презентация (pdf)]] <br> [http://www.columbia.edu/~jwp2128/Papers/HoffmanBleiWangPaisley2013.pdf Статья (pdf)]
 +
|-
 +
| 14&nbsp;ноября&nbsp;2014
 +
| ''Чабаненко Владислав'', студент 3-го курса ВМК<br> '''Неявный стохастический субградиент'''
 +
| [[Media:ChabanenkoImplicitSgdSlides2.pdf | Презентация (pdf)]]
 +
|-
 +
| 28&nbsp;ноября&nbsp;2014
 +
| ''Лобачёва Екатерина'', аспирантка ВШЭ<br> '''Адаптивный биннинг цветового пространства для задачи сегментации изображений'''
 +
| [[Media:presLobachevaAdaptiveBinning.pdf | Презентация (pdf)]]<br> [http://www.csd.uwo.ca/~yuri/Papers/emmcvpr11.pdf Статья 1 (pdf)]
 +
|
 +
|-
 +
| 5&nbsp;декабря&nbsp;2014
 +
| ''Лунин Дмитрий, Демьянов Артем'', студенты 2-го курса ВМК<br> '''Теория решения изобретательских задач'''
 +
| [[Media:LuninDemyanovTRIZSlides.pdf | Презентация (pdf)]]
 +
|-
 +
| 24&nbsp;декабря&nbsp;2014
 +
| ''Бартунов Сергей'', аспирант ВЦ РАН<br> '''Латентные семантические модели'''
 +
| [[Media:BartunovLSM.pdf‎ | Презентация (pdf)]]
|-
|-
|}
|}
 +
 +
== Вопросы к зачёту ==
 +
 +
# Стохастическое обратное распространение ошибки.
 +
# Max-Margin Boltzmann Machines.
 +
# Марковские цепи и спектральная теория.
 +
# Глубинная сеть Крижевского для классификации изображений: <br>ReLU, dropout, нормализация отклика, архитектура, метод оптимизации параметров. [http://www.cs.toronto.edu/~fritz/absps/imagenet.pdf Статья]
 +
# Expectation Propagation.
 +
# Модель TrueSkill.
 +
# Стохастический вариационный вывод.
 +
# Неявный стохастический субградиент.
 +
 +
Зачет состоится 12 декабря в аудитории 637. Начало для 3 курса в 16:20, для 4 и 5 курса в 15:00.

Текущая версия

Основная статья: Спецсеминар "Байесовские методы машинного обучения"

В осеннем семестре 2014 г. спецсеминар проходит на ВМК по пятницам в ауд. 526б, начало в 18-10.

Расписание семинаров

Дата Название семинара Комментарии
12 сентября 2014 Кириллов Александр, аспирант ВМК
Стохастическое обратное распространение ошибки и приближенный вариационный вывод
в глубинных генеративных моделях 		Презентация (pdf)
Статья (pdf)
19 сентября 2014 Осокин Антон, ассистент ВМК
Deconvolutional nets, Визуализация свёрточных сетей 		Презентация

Статья 1 (pdf) Статья 2 (pdf) Tutorial

26 сентября 2014 Гитман Игорь, студент 3-го курса ВМК
Max-Margin Boltzmann Machines 		Презентация (pdf)
Статья (pdf)
3 октября 2014 Родоманов Антон, студент 4-го курса ВМК
Марковские цепи и спектральная теория 		Презентация (pdf)
Статья (pdf)
10 октября 2014 Фигурнов Михаил, аспирант ВМК
Сверточные сети для семантической сегментации изображений 		Презентация (pdf)
Статья 1 (pdf) Статья 2 (pdf) Статья 3 (pdf)
17 октября 2014 Соболевский Андрей Николаевич, зам. декана по научной работе ФКН ВШЭ
Обобщения центральной предельной теоремы на распределения с "тяжёлыми хвостами"
24 октября 2014 Чистяков Александр, студент 4-го курса ВМК
Expectation Propagation на примере TrueSkill, часть 1 		Презентация (pdf)
Статья 1 (pdf) Статья 2 (pdf)
Статья 3 (pdf) Статья 4 (pdf)
31 октября 2014 Чистяков Александр, студент 4-го курса ВМК
Expectation Propagation на примере TrueSkill, часть 2
7 ноября 2014 Бартунов Сергей, аспирант ВЦ РАН
Стохастический вариационный вывод 		Презентация (pdf)
Статья (pdf)
14 ноября 2014 Чабаненко Владислав, студент 3-го курса ВМК
Неявный стохастический субградиент 		Презентация (pdf)
28 ноября 2014 Лобачёва Екатерина, аспирантка ВШЭ
Адаптивный биннинг цветового пространства для задачи сегментации изображений 		Презентация (pdf)
Статья 1 (pdf)
5 декабря 2014 Лунин Дмитрий, Демьянов Артем, студенты 2-го курса ВМК
Теория решения изобретательских задач 		Презентация (pdf)
24 декабря 2014 Бартунов Сергей, аспирант ВЦ РАН
Латентные семантические модели 		Презентация (pdf)

Вопросы к зачёту

  1. Стохастическое обратное распространение ошибки.
  2. Max-Margin Boltzmann Machines.
  3. Марковские цепи и спектральная теория.
  4. Глубинная сеть Крижевского для классификации изображений:
    ReLU, dropout, нормализация отклика, архитектура, метод оптимизации параметров. Статья
  5. Expectation Propagation.
  6. Модель TrueSkill.
  7. Стохастический вариационный вывод.
  8. Неявный стохастический субградиент.

Зачет состоится 12 декабря в аудитории 637. Начало для 3 курса в 16:20, для 4 и 5 курса в 15:00.

Источник — «http://machinelearning.ru/wiki/index.php?title=%D0%A1%D0%BF%D0%B5%D1%86%D1%81%D0%B5%D0%BC%D0%B8%D0%BD%D0%B0%D1%80_%22%D0%91%D0%B0%D0%B9%D0%B5%D1%81%D0%BE%D0%B2%D1%81%D0%BA%D0%B8%D0%B5_%D0%BC%D0%B5%D1%82%D0%BE%D0%B4%D1%8B_%D0%BC%D0%B0%D1%88%D0%B8%D0%BD%D0%BD%D0%BE%D0%B3%D0%BE_%D0%BE%D0%B1%D1%83%D1%87%D0%B5%D0%BD%D0%B8%D1%8F%22/%D0%BE%D1%81%D0%B5%D0%BD%D1%8C_2014»