RÁDSETOULAL, V. Analýza chování malwaru pomocí velkých jazykových modelů [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2024.
Celý dojem z přístupu studenta kazi skutečnost, že práce nebyla průběžně konzultována. Avšak vzhledem ke kvalitní funkční realizaci projektu se zajímavými a využitelnými výsledky navrhuji hodnocení stupněm C.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Informace k zadání | Zadání bylo průměrně náročné a zahrnovalo implementaci systému umožňujícího klasifikaci chování malwaru za použití velkých jazykových modelů. Zadání bylo splněno ve všech bodech. | ||
| Práce s literaturou | Student si literaturu vyhledával především samostatně, při práci s literaturou byl aktivní. | ||
| Aktivita během řešení, konzultace, komunikace | Konzultace byly především v poslední části zpracování práce, vlastní experimenty byly konzultovány s odborným externím konzultantem. Student byl na konzultacích aktivní a vždy dobře připraven. | ||
| Aktivita při dokončování | Student dokončil praktickou i teoretickou část až nedlouho před odevzdáním, takže nebylo moc prostoru zapracovat připomínky odborného konzultanta. | ||
| Publikační činnost, ocenění |
Prácu hodnotím celkovo stupňom B (veľmi dobre) keďže študent splnil zadanie vo všetkých bodoch, volil relevantnú literatúru a vyprodukoval realizačný výstup uplatniteľný v praxi. Otázky k obhajobe: Ako principiálne funguje GPT a aké sú jeho potenciálne problémy a riziká spojené s touto prácou?
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Náročnost zadání | Zadanie bolo inšpirované požiadavkami z firemného prostredia (Ing. Chmelář Ph.D.). Úlohou práce je preskúmanie využitia veľkých jazykových modelov (LLMs) vylepšených technikou Retrieval-Augmented Generation (RAG) pre efektívnu analýzu správania malvéru za účelom jeho detekcie. | ||
| Rozsah splnění požadavků zadání | Zadanie bolo splnené vo všetkých bodoch. | ||
| Rozsah technické zprávy | Diplomová práca má približne 65 normostrán textu, po započítaní obrázkov je to 68 strán. Práca je takmer v normálnom rozmädzí. | ||
| Prezentační úroveň technické zprávy | 90 | Práca je prehľadná, jednotlivé kapitoly na seba nadväzujú a sú pochopiteľné. Možno by som vytkol, že popis LLM v kapitole 4 bol len veľmi povrchný a nešiel do technických detailov princípov. | |
| Formální úprava technické zprávy | 85 | Práca obsahuje minimálny počet preklepov a pravopisných chýb. Po typografickej stránke je práca na vysokej úrovni. Mám len malé poznámky k zarovnaniu tabuliek a obrázkov, ktoré by mohlo byť v mnohých prípadoch na vrch stránky. Ďalej, na niektorých miestach obsahuje práca nevhodne zalomené citácie (mäkké medzery) a tiež názvy obrázkov a tabuliek v texte sú s malým počiatočným písmenom. | |
| Práce s literaturou | 75 | Práca obsahuje 32 referencií, z ktorých je väčšina recenzovaných, tzn. online zdroje. Študijné pramene sú však relevantné k téme. | |
| Realizační výstup | 85 | Výstup implementácie je na veľmi dobrej úrovni a pozostáva z viacerých častí, okrem prostredia na simuláciu zneužitia zraniteľností aj z nástrojov na ich detekciu a následný popis v prirodzenom jazyku. | |
| Využitelnost výsledků | Výstup má výskumný a experimentálny charakter a môže byť uplatnený v praxi. |
eVSKP id 156773