Zobrazení a analýza aktivit neuronové sítě ve skrytých vrstvách
but.committee | prof. Dr. Ing. Jan Černocký (předseda) prof. Ing. Adam Herout, Ph.D. (místopředseda) doc. Ing. Vítězslav Beran, Ph.D. (člen) doc. Dr. Ing. Dušan Kolář (člen) Doc. RNDr. Pavel Matula, Ph.D. (člen) prof. RNDr. Alexandr Meduna, CSc. (člen) | cs |
but.defence | Student nejprve prezentoval výsledky, kterých dosáhl v rámci své práce. Komise se poté seznámila s hodnocením vedoucího a posudkem oponenta práce. Student následně odpověděl na otázky oponenta a na další otázky přítomných. Komise se na základě posudku oponenta, hodnocení vedoucího, přednesené prezentace a odpovědí studenta na položené otázky rozhodla práci hodnotit stupněm velmi dobře (B). Otázky u obhajoby: Je možné zobrazit originální a normované zobrazení do stejného prostoru, aby bylo možné porovnat velikost aktivačních regionů které budou na stejných místech (obrázky 6.1 a 6.2)? Prostor pro LSTM NN je značně zkreslen. Zkoušel jste zobrazit aktivační mapy samostatně pro LSTM a případně je porovnat s mapami pro ostatní NN? V práci poukazujete na podobnost aktivací posledních vrstev normální NN s prvními vrstvami RELU NN. Dá se z tohoto pozorování vyvodit, že by RELU NN fungovala s méně vrstvami podobně jako normální NN s více vrstvami? Tabulka 6.3 porovnává chybovost dosaženou z použitím neuronové sítě trénované na čistých a zašuměných datech. Měnil jste "word insertion penalty" sytému, aby jste dosáhl optimálních výsledků? | cs |
but.jazyk | čeština (Czech) | |
but.program | Informační technologie | cs |
but.result | práce byla úspěšně obhájena | cs |
dc.contributor.advisor | Karafiát, Martin | cs |
dc.contributor.author | Fábry, Marko | cs |
dc.contributor.referee | Grézl, František | cs |
dc.date.created | 2016 | cs |
dc.description.abstract | Cílem této práce je vytvořit systém schopný zobrazení hodnot aktivačních funkcí neuronů nacházejících se v skrytých vrstvách neuronových sítí použitých na rozpoznávání řeči. Dále byly na tomto systému provedeny experimenty porovnávající vizualizační metody, vizualizace neuronových sítí s různými architekturami a s různými druhy vstupních dat. Vizualizační systém implementovaný v rámci této práce je založen na předchozí práci pana Khe Chai Sim a rozšířen o nové způsoby normalizace vstupních dat. Pro přípravu trénovacích dat neuronových sítí byl použit framework Kaldi. Pro samotné trénování neuronových sítí byl použit nový framework CNTK. Jádro práce - samotný vizualizační systém byl implementován v skriptovacím jazyce Python. | cs |
dc.description.abstract | Goal of this work was to create system capable of visualisation of activation function values, which were produced by neurons placed in hidden layers of neural networks used for speech recognition. In this work are also described experiments comparing methods for visualisation, visualisations of neural networks with different architectures and neural networks trained with different types of input data. Visualisation system implemented in this work is based on previous work of Mr. Khe Chai Sim and extended with new methods of data normalization. Kaldi toolkit was used for neural network training data preparation. CNTK framework was used for neural network training. Core of this work - the visualisation system was implemented in scripting language Python. | en |
dc.description.mark | B | cs |
dc.identifier.citation | FÁBRY, M. Zobrazení a analýza aktivit neuronové sítě ve skrytých vrstvách [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2016. | cs |
dc.identifier.other | 96418 | cs |
dc.identifier.uri | http://hdl.handle.net/11012/61891 | |
dc.language.iso | cs | cs |
dc.publisher | Vysoké učení technické v Brně. Fakulta informačních technologií | cs |
dc.rights | Standardní licenční smlouva - přístup k plnému textu bez omezení | cs |
dc.subject | hluboká neuronová síť | cs |
dc.subject | skrytá vrstva | cs |
dc.subject | rozpoznávání řeči | cs |
dc.subject | vizualizace | cs |
dc.subject | analýza | cs |
dc.subject | aktivace | cs |
dc.subject | t-SNE | cs |
dc.subject | Kaldi | cs |
dc.subject | CNTK | cs |
dc.subject | deep neural network | en |
dc.subject | hidden layer | en |
dc.subject | speech recognition | en |
dc.subject | visualisation | en |
dc.subject | analysis | en |
dc.subject | activations | en |
dc.subject | t-SNE | en |
dc.subject | Kaldi | en |
dc.subject | CNTK | en |
dc.title | Zobrazení a analýza aktivit neuronové sítě ve skrytých vrstvách | cs |
dc.title.alternative | Activity of Neural Network in Hidden Layers - Visualisation and Analysis | en |
dc.type | Text | cs |
dc.type.driver | masterThesis | en |
dc.type.evskp | diplomová práce | cs |
dcterms.dateAccepted | 2016-06-17 | cs |
dcterms.modified | 2020-05-10-16:12:32 | cs |
eprints.affiliatedInstitution.faculty | Fakulta informačních technologií | cs |
sync.item.dbid | 96418 | en |
sync.item.dbtype | ZP | en |
sync.item.insts | 2025.03.26 15:22:36 | en |
sync.item.modts | 2025.01.15 20:42:23 | en |
thesis.discipline | Počítačová grafika a multimédia | cs |
thesis.grantor | Vysoké učení technické v Brně. Fakulta informačních technologií. Ústav počítačové grafiky a multimédií | cs |
thesis.level | Inženýrský | cs |
thesis.name | Ing. | cs |
Files
Original bundle
1 - 4 of 4
Loading...
- Name:
- final-thesis.pdf
- Size:
- 7.57 MB
- Format:
- Adobe Portable Document Format
- Description:
- final-thesis.pdf
Loading...
- Name:
- Posudek-Vedouci prace-18497_v.pdf
- Size:
- 85.66 KB
- Format:
- Adobe Portable Document Format
- Description:
- Posudek-Vedouci prace-18497_v.pdf
Loading...
- Name:
- Posudek-Oponent prace-18497_o.pdf
- Size:
- 88.46 KB
- Format:
- Adobe Portable Document Format
- Description:
- Posudek-Oponent prace-18497_o.pdf
Loading...
- Name:
- review_96418.html
- Size:
- 1.47 KB
- Format:
- Hypertext Markup Language
- Description:
- file review_96418.html