SKOVAJSA, J. Generování sci-fi, detektivních, rodokapsových, erotických, případně jiných příběhů [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2025.
Z hlediska aktivity hodnotím práci stupněm C - dobře. I když činnost studenta nebyla v obou semestrech zcela souvislá, vzal si k srdci zpětnou vazbu z obhajoby své práce po prvním semestru, ve druhém přistoupil k řešení aktivněji a dotáhl navržené aplikace do funkční podoby.
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Informace k zadání | Zadání vyžadovalo seznámení se s moderními metodami pro generování literárních textů, vytvoření experimentálního systému a jeho detailní vyhodnocení. Bohužel experimentování s adaptací jazykových modelů nevedlo delší dobu k cíli, proto se student nakonec soustředil pouze na využití standardních cloudových LLM a hledání podobných příběhů převážně na základě natrénovaných znalostí. Také k vyhodnocení kvality generování napříč žánry došlo jen ve velmi omezené míře. Na druhé straně ale vznikla funkční webová i mobilní aplikace, která byla navíc rozšířena o možnost čtení vygenerovaného textu pomocí syntézy řeči. | ||
| Práce s literaturou | Student samostatně shromáždil a vhodně využil relevantní zdroje a literární prameny, některé oblasti, například pokročilé metody a způsoby vyhodnocování kreativity generovaných textů, zůstaly nepokryty. | ||
| Aktivita během řešení, konzultace, komunikace | Student byl během řešení práce aktivní, komunikoval průběžně a na konzultace byl připraven. | ||
| Aktivita při dokončování | Práce byla dokončována v dostatečném předstihu, měl jsem možnost konzultovat průběžnou podobu technické zprávy, většinu mých poznámek se podařilo začlenit do finální podoby textu. | ||
| Publikační činnost, ocenění | - |
Student splnil zadání s drobnými výhradami. Prezentační úroveň technické zprávy je na nižší úrovni. Některé kapitoly práce by měly být obsáhlejší. Lokální modely použité studentem nepřinesly očekávané výsledky, a proto se řešení opírá především o cloudovou službu ChatGPT. Navrhuji proto hodnocení stupněm uspokojivě / D (60b).
| Kritérium | Známka | Body | Slovní hodnocení |
|---|---|---|---|
| Náročnost zadání | Zadání lze označit za průměrně obtížné. Student měl za úkol vytvořit systém pro generování krátkých příběhů. | ||
| Rozsah splnění požadavků zadání | Zadání bylo splněno, avšak mám drobné výhrady k bodům 2 a 3. Student se v bodě 2 nezaměřil na nejčastější zápletky, respektive klišé typické pro daný žánr, a v bodě 3 neřešil vliv parametrů na kreativitu modelu. | ||
| Rozsah technické zprávy | Rozsah technické zprávy splňuje pouze minimální požadavky, nicméně jednotlivé části jsou informačně bohaté. | ||
| Prezentační úroveň technické zprávy | 55 | Logická struktura technické zprávy je průměrná, kapitoly na sebe většinou navazují. Vytkl bych však, že jsou často příliš stručné (např. kapitoly 5, 6 a 8). Na některých místech je práce pro čtenáře obtížněji srozumitelná. Student některé části vysvětluje nepřesně či nedostatečně. V textu se objevují sporná, nejasně formulovaná nebo nepodložená tvrzení. Obrázky často nejsou dostatečně vysvětleny, jejich popisky jsou příliš stručné a chybí jim lepší provázání s okolním textem. Obecně by práci prospělo více příkladů. V kapitole 5 Návrh systému bych uvítal diagram, který by popisoval strukturu navrženého systému. Obrázky 7.1, 7.2 a 7.3 s vyhodnocením systému by bylo vhodnější prezentovat ve formě tabulek. | |
| Formální úprava technické zprávy | 65 | Typografická stránka práce je v pořádku. Vytkl bych jen nečíslovanou rovnici na straně 22. Po jazykové stránce práce obsahuje několik překlepů a pravopisných či stylistických chyb. Ve vybraných případech student používá převzaté obrázky, jejichž texty však často nepřekládá. | |
| Práce s literaturou | 65 | Zhruba třetinu zdrojů tvoří vědecké publikace relevantní k tématu práce. Zbývající zdroje tvoří především blogy a webové stránky. Mezi použitými zdroji se nachází také Wikipedie, což není zcela vhodné pro odbornou práci. K některým pojmům by bylo vhodné doplnit reference nebo alespoň odkazy pod čarou (např. Llama-2-7B, Claude). | |
| Realizační výstup | 60 | Realizační výstup práce je funkční, ale má několik nedostatků. Při výběru použitých modelů a datových sad student neuvádí důvody své volby ani nezmiňuje případné alternativy. Lokálně použité modely nedávají příliš dobré výsledky. Funkčnost řešení je tak do značné míry závislá na využití cloudového ChatGPT. Rozšířením práce oproti zadání je možnost převodu vygenerovaného textu na řeč. | |
| Využitelnost výsledků | Jedná se o práci kompilačního charakteru. Implementované aplikace umožňují generování krátkých příběhů, i když s určitými omezeními. |
eVSKP id 160537