KUCHTA, S. Pokročilá vizualizace trénování neuronových sítí [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2023.

Posudky

Posudek vedoucího

Beneš, Karel

Student se do práce na v zásadě výzkumném tématu dostatečně neponořil. Z hlediska splnění zadání považuji za největší nedostatek velmi povrchní vyhodnocení výsledků. To se v textové zprávě snoubí s nedostatečně přesvedčivým představením předchozího stavu poznání -- a je to škoda, protože v jádru práce je dosti zajímavá původní myšlenka studentova.

Dílčí hodnocení
Kritérium Známka Body Slovní hodnocení
Informace k zadání Toto zadání je velmi otevřené a v zásadě výzkumného rázu, v návaznosti na odborné články a nedávnou úspěšnou bakalářskou práci žádá, aby se řešitel ponořil do problematiky trénování moderních neuronových sítí a samostatně navrhl a prozkoumal některé procesy probíhající během tohoto trénování. Výsledné řešení považuji za rozpačité. Student navrhl poměrně zajímavou vizualizaci vývoje parametrů modelu a vykonal množství explorativních experimentů, ale v práci i textové zprávě mi znatelně chybí jejich zhodnocení.
Práce s literaturou Student byl při získávání studijních materiálů samostaný. V průběhu práce bylo patrno, že se jedná o jeho první větší zkušenost se samostatným studiem odborného problému, a ke cti mu slouží, že byl v průběhu práce patrný pokrok v přístupu k odborným pramenům a následně hlubšímu porozumění problematice. Související oblastí, kde se řešitel postupně zlepšoval, je úroveň jeho vlastního textu. Zde bohužel musím konstatovat, že výsledek stále zaostává za očekáváním, zejm. z hlediska strukturování textu a návaznosti jednotlivých podkapitol.
Aktivita během řešení, konzultace, komunikace Student byl během řešení přiměřeně aktivní. V době nejdelšího ne-kontaktu s vedoucím přišel samostatně s nejhodnotnější myšlenkou práce a to oceňuji.
Aktivita při dokončování Práce nebyla dokončena v předstihu, neměl jsem možnost se seznámit s konečnou verzí textu a řada připomínek k představeným částem technické zprávy zůstala nezapracována.
Publikační činnost, ocenění Vytvořené zdrojové kódy jsou zveřejněny pod open-source licencí na GitHubu.
Navrhovaná známka
D
Body
65

Posudek oponenta

Kesiraju, Santosh

- Overall it is a good peice of work. - The report could have been better towards the final chapter, explaining the fine-details would have made the thesis even better.  

Dílčí hodnocení
Kritérium Známka Body Slovní hodnocení
Náročnost zadání - The thesis works aims to implement, propose techniques for visualizing the training progress of a neural network. It builds on the top of prior Bachelor's thesis and other published works. - In general visualizing the training process of NN is a challenging task, the scope of thesis takes this into consideration and suggests to build on prior works, mainly exploring the training path, update step sizes, optimization techniques, using a couple of standard supervised classification tasks.
Rozsah splnění požadavků zadání - The student managed to fullfill the assignment. However there are few minor deviations. - While there is significant focus on the training paths, and update steps, I wish the thesis would have received more attention to the metrics such as loss, and the end accuracy on the validation set.The relation to training paths, step sizes and loss is only discussed towards the end, and seems a bit hurried up.
Rozsah technické zprávy The thesis content meets the minimum requirements of 40 pages.
Prezentační úroveň technické zprávy 74 - The first few chapters are well written and connected. - However, the details regarding on how the training path is computed, or how the parameters of NN are reduced using PCA are not clearly explained in the text, i.e., flattenning of the parameters into single vector, etc. - No justification was provided as to why all the parameters of all the layers have to flattened into a single vector. - The initial chapters give overview of wide range of NN analyzing techniques, but only a couple of them were used in the experiments. - These were only clarified during the verbal communication with the student.
Formální úprava technické zprávy 80 - The linguistic aspect and presentaiton of the report is satisfactory.  
Práce s literaturou 85 - The literature review and citations are okay.
Realizační výstup 85 - The software is published under MIT license on github. - The documentation is decent.
Využitelnost výsledků - The work extends prior Bachelor's thesis, and has potential to influence future works, since the chosen topic is important for the research community in general.
Navrhovaná známka
C
Body
77

eVSKP id 147671