FRIČ, M. Vyhodnocení kvality a dostupnosti zdrojů lidské řeči pro tvorbu deepfakes [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2024.
Student splnil všechny body zadání a prokázal vysokou míru samostatnosti při jeho řešení. Výstupy práce přinášejí nové a důležité poznatky pro výzkumníky v oblasti bezpečnosti. Zpracování je v dostatečné kvalitě a po doplnění testovací vzorky z bakalářské práce bude možno práci publikovat v relevantním žurnálu.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Informace k zadání | Zadání této bakalářské práce bylo náročnější a vyžadovalo velkou míru samostatnosti. Volnost zadání byla studentem dobře využita a s dosaženými výsledky jsem spokojen. | ||
| Práce s literaturou | Student zpracoval doporučenou literaturu a sám vyhledával a využíval další relevantní zdroje, které vhodně doplnily teoretickou část práce. | ||
| Aktivita během řešení, konzultace, komunikace | Komunikace probíhala formou pravidelných schůzek, na které student chodil připravený a vždy prezentoval pokrok ve své práci. | ||
| Aktivita při dokončování | Práce byla dokončena v dostatečném předstihu a její obsah byl upraven podle doporučení. | ||
| Publikační činnost, ocenění | Výstupy práce je v plánu publikovat v relevantním žurnálu. |
Práce je zpracována na výborné úrovni, dosáhla pro komunitu zajímavých výsledků, které mají publikační potenciál. Zpracování a interpretace výsledků je na výborné úrovni. Student velmi dobře zvládl všechny komplexní kroky nutné k navržení metodologie a její úspěšné aplikace a vyhodnocení. Pozitivně hodnotím zpracování textové části v angličtině.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Náročnost zadání | Jedná se o práci spíše výzkumnějšího charakteru, která nicméně nevyžadovala zásadní implementační práce. | ||
| Rozsah splnění požadavků zadání | Student splnil všechny body zadání na výborné úrovni. Navíc zpracování bodu 4 zahrnuje i velmi robustní experimentální ověření vybraných zdrojů, které obsahuje i ověření lidskými subjekty. Student dále v rámci řešení objevil zajímavou vlastnost zkoumaných detektorů deepfakes, kterou dále investigoval. | ||
| Rozsah technické zprávy | Rozsah technické zprávy výrazně přesahuje požadavky na bakalářskou práci a téměř dosahuje maxima 100 normostran. Nicméně všechny části jsou relevantní a přiměřeně informačně bohaté. Významnou část představuje návrh metodologie a výsledky experimentů. | ||
| Prezentační úroveň technické zprávy | 95 | Logická struktura práce je na výborné úrovni. Autor vhodným způsobem představuje řešenou problematiku vč. souvisejícího výzkumu a technologií potřebných k porozumění větších detailů. Práce velmi robustně zpracovává související výzkum. Metodologie hodnocení je korektní a velmi dobře popsaná. Navržené experimenty jsou rozsáhlé a detailní. Výsledky jsou detailně diskutovány. Autor pokrývá i relevantní okrajové oblasti jako je například legislativní rámec. | |
| Formální úprava technické zprávy | 85 | Jazyková a stylistická stránka práce i úroveň typografie je na výborné úrovni. Pozitivně hodnotím zpracování v angličtině. Práce se nevyhnula menšímu množství chyb - např. chybějící jednotky, chybějící odkaz v textu na použitý obrázek. | |
| Práce s literaturou | 95 | Odkazované zdroje jsou relevantní tématu a vhodně vybrány. Přes jejich relativně velký počet jsou dobře interpretovány. Student vhodně začlenil existující metriky do navržené metodologie. Občas je stejný zdroj nadměrně začleněn v textu (stejná citace u pěti za sebou jdoucích odstavců). | |
| Realizační výstup | 95 | Realizačním výstupem této práce je navržená metodika hodnocení zdrojů, která je následně aplikována na reprezentativně vybrané zdroje. Hlavním přínosem je kreativní návrh metodologie a zajímavé výsledky, jejichž bezpečnostní dopad je v závěru práce diskutován. Velmi pozitivně hodnotím další analýzu objevené anomálie detekčního nástroje, kde vhodné začlenění šumu zásadně ovlivňovalo výsledky. Jedná se tak o zajímavé zjištění hodné dalšího výzkumu. Získané experimentální výsledky řeší aktuální téma a vzhledem k velikosti testované množiny (kterou student sám vytvořil) a kvalitě metodologie a vlastní realizace měření mají potenciál být zpracovány do akademické publikace. | |
| Využitelnost výsledků | Výsledky přináší další vhled do oblasti zneužití deepfakes, kdy lépe vysvětlují reálnou sílu útočníka. Přináší také zajímavá pozorování, které je vhodno dále zkoumat. Konkrétně nestandardní rozpoznávání šumu u detekčních metod a dále pak paradoxní situaci, kdy méně kvalitní zdroje vytváří deepfakes, které jsou hůře rozeznatelné dostupnými detekčními metodami. |
eVSKP id 150738