Rozšíření aktivního síťového monitorování o vysvětlitelnou diagnostiku
Loading...
Date
Authors
Assatulla, Dias
Advisor
Referee
Mark
B
Journal Title
Journal ISSN
Volume Title
Publisher
Vysoké učení technické v Brně. Fakulta informačních technologií
ORCID
Abstract
Tato práce se zaměřuje na zlepšení aktivního monitorování sítě o vysvětlitelnou diagnostiku s využitím rozsáhlých jazykových modelů (LLM). Byl vyvinut systém pro monitorování služeb, jako jsou SMTP, SSH, FTP a dostupnost hostů pomocí ICMP. Pro každou službu jsou generovány strukturované logy, které jsou v případě detekce chyby odeslány k analýze LLM modelem. Byly vybrány modely Gemini, Nous Hermes 2 a LLaMA a pomocí technice prompt engineering tyto modely vytvářejí srozumitelná vysvětlení, která popisují příčiny chyb a poskytují doporučení. Tento přístup byl hodnocen v několika scénářích a prokázal praktickou užitečnost. Pro posouzení kvality vytvořených výstupů byl proveden online dotazník, jehož výsledky potvrdily, že vysvětlení z LLM byla ve většině případů vnímána jako jasná, užitečná a relevantní.
This thesis focuses on improving active network monitoring by integrating explainable diagnostics using large language models (LLMs). A system was developed to monitor services such as SMTP, SSH, FTP, and host availability using ICMP. It generates structured logs for each service, which are sent to an LLM for analysis if an error is detected. Gemini, Nous Hermes 2, and LLaMA models were selected, and through prompt engineering, these models produce human-readable explanations detailing error causes and providing recommendations. The approach was evaluated in several scenarios and demonstrated practical usefulness. An online survey was conducted to assess the quality of the generated outputs, and the results confirmed that the explanations from the LLMs were perceived as clear, helpful, and relevant in most cases.
This thesis focuses on improving active network monitoring by integrating explainable diagnostics using large language models (LLMs). A system was developed to monitor services such as SMTP, SSH, FTP, and host availability using ICMP. It generates structured logs for each service, which are sent to an LLM for analysis if an error is detected. Gemini, Nous Hermes 2, and LLaMA models were selected, and through prompt engineering, these models produce human-readable explanations detailing error causes and providing recommendations. The approach was evaluated in several scenarios and demonstrated practical usefulness. An online survey was conducted to assess the quality of the generated outputs, and the results confirmed that the explanations from the LLMs were perceived as clear, helpful, and relevant in most cases.
Description
Citation
ASSATULLA, D. Rozšíření aktivního síťového monitorování o vysvětlitelnou diagnostiku [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2025.
Document type
Document version
Date of access to the full text
Language of document
en
Study field
Informační technologie
Comittee
doc. Ing. Petr Matoušek, Ph.D., M.A. (předseda)
Ing. Bohuslav Křena, Ph.D. (člen)
Ing. Jan Pluskal, Ph.D. (člen)
Ing. František Grézl, Ph.D. (člen)
Ing. Jiří Matoušek, Ph.D. (člen)
Date of acceptance
2025-06-19
Defence
Student nejprve prezentoval výsledky, kterých dosáhl v rámci své práce. Komise se poté seznámila s hodnocením vedoucího a posudkem oponenta práce. Student následně odpověděl na otázky oponenta a na další otázky přítomných. Komise se na základě posudku oponenta, hodnocení vedoucího, přednesené prezentace a odpovědí studenta na položené otázky rozhodla práci hodnotit stupněm B.
Result of defence
práce byla úspěšně obhájena
