PV021 Neural Networks

Fakulta informatiky
podzim 2023
Rozsah
2/0/2. 4 kr. (plus ukončení). Doporučované ukončení: zk. Jiná možná ukončení: k.
Vyučující
doc. RNDr. Tomáš Brázdil, Ph.D. (přednášející)
Mgr. Tomáš Foltýnek, Ph.D. (pomocník)
Mgr. Matej Gallo (pomocník)
Mgr. Adam Bajger (pomocník)
Mgr. Adam Ivora (pomocník)
Mgr. Andrej Kubanda (pomocník)
Mgr. Tomáš Repák (pomocník)
Mgr. Petr Zelina (pomocník)
Garance
doc. RNDr. Tomáš Brázdil, Ph.D.
Katedra strojového učení a zpracování dat – Fakulta informatiky
Kontaktní osoba: doc. RNDr. Tomáš Brázdil, Ph.D.
Dodavatelské pracoviště: Katedra strojového učení a zpracování dat – Fakulta informatiky
Rozvrh
Po 8:00–9:50 D2
Předpoklady
Recommended: knowledge corresponding to the courses MB102 and MB103.
Omezení zápisu do předmětu
Předmět je nabízen i studentům mimo mateřské obory.
Mateřské obory/plány
Cíle předmětu
Introduction to neural networks.
Výstupy z učení
At the end of the course student will have a comprehensive knowledge of neural networks and related areas of machine learning. Will be able to independently learn and explain neural networks problems. Will be able to solve practical problems using neural networks techniques, both independently and as a part of a team. Will be able to critically interpret third party neural-networks based solutions.
Osnova
  • Basics of machine learning and pattern recognition: classification and regression problems; supervised and unsupervised learning; simple examples
  • Perceptron: biological motivation; geometry
  • Linear models: least squares (gradient descent, Widrow-Hoff rule); connection with maximum likelihood
  • Multilayer neural networks: multilayer perceptron; loss functions; backpropagation
  • Practical considerations: basic data preparation; practical techniques for learning optimization; overfitting & regularization; feature selection; applications
  • Deep learning: learning in deep neural networks (vanishing gradient, pretraining with autoencoders)
  • Convolutional networks
  • Recurrent networks: Elman and Jordan networks, LSTM
  • Transformer networks
Literatura
    doporučená literatura
  • GOODFELLOW, Ian, Yoshua BENGIO a Aaron COURVILLE. Deep Learning. MIT Press, 2016. info
    neurčeno
  • ŠÍMA, Jiří a Roman NERUDA. Teoretické otázky neuronových sítí. Vyd. 1. Praha: Matfyzpress, 1996, 390 s. ISBN 80-85863-18-9. info
Výukové metody
Theoretical lectures, group project
Metody hodnocení
Lectures, class discussion, projects. Oral examination.
Vyučovací jazyk
Angličtina
Další komentáře
Studijní materiály
Předmět je vyučován každoročně.
Nachází se v prerekvizitách jiných předmětů
Předmět je zařazen také v obdobích jaro 2003, jaro 2004, jaro 2005, jaro 2007, jaro 2009, jaro 2011, jaro 2012, jaro 2013, jaro 2014, podzim 2015, podzim 2016, podzim 2017, podzim 2018, podzim 2019, podzim 2020, podzim 2021, podzim 2022, podzim 2024.