KAŠKA, P. Odolnost biometrické autentizace hlasových asistentů oproti deepfakes [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2024.
Při celkovém hodnocení nejvíce zohledňuji dopady výsledků práce, množství odvedené práce na experimentu a celkové zapojení studenta do realizovaného výzkumu. Student při řešení práce postupoval systematicky a velmi dobře si poradil s technickými překážkami. Výborně se také zorientoval v aktuálních vědeckých výsledcích, a hlavně úspěšně zrealizoval a vyhodnotil rozsáhlý a časově náročný navržený experiment. Práce byla po celou dobu pravidelně konzultována, kvalita textu je na výborné úrovni. Výsledky byly publikovány na kvalitní vědecké konferenci. Pozitivně hodnotím i zpracování v angličtině a účast a zisk ocenění na Excel@FIT. Dávám komisi ke zvážení, zda tuto práci nenavrhnout na jedno z možných ocenění.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Informace k zadání | Jedná se o bakalářskou práci s výzkumným přesahem. Cílem bylo prakticky ověřit zranitelnost hlasových asistentů vůči útokům využívající deepfakes. Práci hodnotím jako průměrně obtížnou. Student splnil všechny body zadání. Pomáhal navrhnout experiment a následně samostatně realizoval a vyhodnotil robustní experiment, který ověřoval reálnou zranitelnost vybraných hlasových asistentů. Výsledky prokázaly existující zranitelnosti u všech zkoumaných asistentů a byly využity jako jádro článku, který byl již podmíněně přijat na konferenci ESORICS (core A). | ||
| Práce s literaturou | Student aktivně vyhledával relevantní dostupnou literaturu a vhodně ji začlenil do své práce. Práce obsahuje drobnou podobnost s již publikovanými bakalářskými pracemi, a to z důvodu, že na ně přímo navazuje a rozšiřuje je. Jedná se však z většiny o použitou literaturu a část zadání. Tyto práce jsou také součástí zmíněného článku. | ||
| Aktivita během řešení, konzultace, komunikace | Student začal na práci pracovat již před v květnu 2023 a urychlil práce tak, aby byly praktické výsledky experimentu hotové a použitelné pro plánovaný článek, který měl uzávěrku pro odevzdání v lednu. Po celou dobu řešení jsme měli pravidelné schůzky, na kterých byly konzultovány dílčí kroky řešení a celkový směr práce. Student byl vždy výborně připraven. | ||
| Aktivita při dokončování | Textová část práce byla dokončena s více než měsíčním předstihem. Student obsah práce konzultoval průběžně a její definitivní obsah mi byl zaslán k připomínkování v dostatečném předstihu. Všechny mé připomínky k práci byly zapracovány. | ||
| Publikační činnost, ocenění | Student se zúčastnil Excel@FIT 2024 a byl oceněn partnery z průmyslu. Výsledky práce byly využity jako část jádra článku, který byl podmíněně přijat na konferenci ESORICS (core A). |
Prácu hodnotim ako kvalitne spracovanú. Študent vynaložil veľkú námahu zozbierať dáta od 72 rôznych subjektov. Tieto dáta vhodne spracoval a správne vyhodnotil výsledky.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Náročnost zadání | Jedná sa o experimentálnu prácu, kde je potrebné sa oboznámiť s aktuálne najvyspelejšími metódami pre tvorbu DeepFake hlasu a overiť bezpečnosť moderných hlasových asistentov voči týmto hrozbám. | ||
| Rozsah splnění požadavků zadání | Všetky body zadania boli splnené. Študent poctivo preskúmal široku škálu hlasových asistentov, z ktorých odôvodnene vybral 4 na ktorých vykonával experimenty. Úspešne navrhol a vykonal experimenty ktorých sa zúčastnilo až 72 subjektov. Jedinú výhradu mám k bodu 1, ktorý je v práci zapracovaný, ale mohol byť viacej rozpísaný. To však nemalo vplyv na celkové výsledky práce, ktoré hodnotím ako splnené nad rámec zadania. | ||
| Rozsah technické zprávy | |||
| Prezentační úroveň technické zprávy | 85 | Práca je logicky rozdelená, jednotlivé sekcie na seba nadväzujú. Výhradu mám ku kapitole 8. Vzhľadom na jej obsah a rozsah, mohla byť táto kapitola sekciou v kapitole 7. | |
| Formální úprava technické zprávy | 95 | Práca je písaná kvalitnou angličtinou, jednotlivé časti sú zrozumitelne popísané a dajú sa jednoducho čítať s porozumením. Menší nedostatok obsahuje popis obrázku 2.4., kde link k použitému nástroju mohol byť priložený ako poznámka pod čiarou. | |
| Práce s literaturou | 100 | Študent si našiel dostatočný počet relevantných a kvalitných zdrojov, ktoré správne v texte citoval. | |
| Realizační výstup | 100 | Práca bola prevažne experimentálna a vykonané experimenty boli rozsiahle a kvalitne zpracované. | |
| Využitelnost výsledků | Práca rozširuje existujúce publikácie, prináša širší pohľad a rozsiahlejšie experimenty. Výsledok práce poukazuje na zraniteľnosť používaných hlasových asistentov čo poukazuje na potrebu nadviazať na výsledky tejto práce v snahe zabrániť moźným útokom. |
eVSKP id 154457