[#] [Перевод] Отжиг и вымораживание: две свежие идеи, как ускорить обучение глубоких сетей
habrabot(difrex,1) — All
2017-07-06 15:00:05


![][1]

В этом посте изложены две недавно опубликованные идеи, как ускорить процесс обучения глубоких нейронных сетей при увеличении точности предсказания. Предложенные (разными авторами) способы ортогональны друг другу, и могут использоваться совместно и по отдельности. Предложенные здесь способы просты для понимания и реализации. Собственно, ссылки на оригиналы публикаций:
* [Snapshot ensembles (апрель 2017)][2]
* [FreezeOut (июнь 2017)][3]
[Читать дальше →][4]

[1]: https://habrastorage.org/web/6d8/3d0/c76/6d83d0c76fb34e8ea590ca3a190f61c8.png
[2]: https://arxiv.org/abs/1704.00109
[3]: https://arxiv.org/abs/1706.04983
[4]: https://habrahabr.ru/post/332534/?utm_source=habrahabr&utm_medium=rss&utm_campaign=feed_posts#habracut