Detail of the student project

List
Topic:Studium sítí typu LSTM na datech z přírodních věd
Department:Katedra kybernetiky
Supervisor:prof. Ing. RNDr. Martin Holeňa, CSc.
Announce as:Diplomová práce, Semestrální projekt
Description:Mezi moderními umělými neuronovými sítěmi (tzv. hlubokými), které přispěly k velkému rozvoji strojového učení v posledních 15 letech, patří k nejúspěšnějším sítě typu LSTM (long short-term memory). Nejčastěji se používají při zpracování jazyka, a to jak psaného textu, tak mluvené řeči. Jde o sítě rekurentní, zpracovávané signály se tedy do některých vrstev sítě s určitým zpožděním vrací. Velkým pokrokem LSTM sítí ve srovnání se staršími typy rekurentních síti je, že dokáží zabránit vymizení gradientu v důsldku rekurentního výpočtu. Aby toho bylo dosaženo, probíhají somatické operace v rekurentních vrstvách sítě nikoliv jako sekvence atomických operací, ale paralelně v různých částech strukturovaných buněk, které v těchto vrstvách nahrazují tradiční neurony umělých neuronových sítí.
Bibliography:viz https://www.cs.cas.cz/~martin/diplomka60.html
Responsible person: Petr Pošík