Optimalizace distribuovaného I/O subsystému projektu k-Wave
| but.committee | prof. Ing. Jan M. Honzík, CSc. (předseda) doc. Dr. Ing. Otto Fučík (místopředseda) Ing. Martin Karafiát, Ph.D. (člen) doc. Ing. Ondřej Ryšavý, Ph.D. (člen) Ing. Aleš Smrčka, Ph.D. (člen) | cs |
| but.defence | Student nejprve prezentoval výsledky, kterých dosáhl v rámci své práce. Komise se poté seznámila s hodnocením vedoucího a posudkem oponenta práce. Student následně odpověděl na otázky oponenta a na další otázky přítomných. Komise se na základě posudku oponenta, hodnocení vedoucího, přednesené prezentace a odpovědí studenta na položené otázky rozhodla práci hodnotit stupněm A. Otázky u obhajoby: Je možné při použití HDF5 překrýt výpočet se zápisem do souboru? Jaký vliv by mělo překrytí na rychlost zápisu? Jak velká by musela být simulační doména (resp. celková velikost subdomén v oblastech zájmu), aby došlo k vyčerpání operační paměti uzlu při zápisu pomocí jediného uzlu (64 GB na superpočítači Anselm)? Bylo by možné využít tlusté uzly pro agregaci dat a následný zápis do souboru? | cs |
| but.jazyk | čeština (Czech) | |
| but.program | Informační technologie | cs |
| but.result | práce byla úspěšně obhájena | cs |
| dc.contributor.advisor | Jaroš, Jiří | cs |
| dc.contributor.author | Vysocký, Ondřej | cs |
| dc.contributor.referee | Hrbáček, Radek | cs |
| dc.date.accessioned | 2018-10-21T21:43:36Z | |
| dc.date.available | 2015-06-17 | cs |
| dc.date.created | 2014 | cs |
| dc.description.abstract | Práce se zabývá řešením efektivního paralelního zápisu velkých objemů dat na souborovém systému Lustre. Cílový program je navržen pro projekt k-Wave simulující šíření akustických a ultrazvukových vln. Tato simulace pro svou výpočetní a datovou náročnost vyžaduje spouštění na superpočítači a implementaci pomocí knihoven pro paralelní zpracování (Open MPI) a pro uložení velkých objemů dat (HDF5). Výsledný program je implementován v jazyce C s využitím zmíněných knihoven. Správným nastavením souborového systému Lustre bylo dosaženo rychlosti 2,5 GB/s, jež odpovídá 5-ti násobnému zrychlení nativního zápisu, který byl následně pomocí techniky agregace dat zrychlen až na 3 GB/s, což naráží na teoretické limity diskového pole superpočítače Anselm. | cs |
| dc.description.abstract | This thesis deals with an effective solution of parallel writing of variable amounts of data on the Lustre file system. The work will be used by the k-Wave project designed for time domain acoustic and ultrasound simulations. Since the simulation is computationally and data intensive, the project requires to be implemented with libraries for parallel computig (Open MPI) and large data processing (HDF5) and it must run on a supercomputer. The application is implemented in C and uses previously mentioned libraries. The proper settings of the Lustre file system leads to the peak write bandwith of 2.5 GB/s that corresponds to a speedup factor of 5 compared to the reference settings. The data aggregation improved the write bandwidth by a factor of 3 compared to a naive version. Here, the achieved I/O bandwidth for certain block sizes hits the limits of the Anselm I/O subsytem (3GB/s). | en |
| dc.description.mark | A | cs |
| dc.identifier.citation | VYSOCKÝ, O. Optimalizace distribuovaného I/O subsystému projektu k-Wave [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2014. | cs |
| dc.identifier.other | 79932 | cs |
| dc.identifier.uri | http://hdl.handle.net/11012/56540 | |
| dc.language.iso | cs | cs |
| dc.publisher | Vysoké učení technické v Brně. Fakulta informačních technologií | cs |
| dc.rights | Přístup k plnému textu prostřednictvím internetu byl licenční smlouvou omezen na dobu 1 roku/let | cs |
| dc.subject | k-Wave | cs |
| dc.subject | paralelní programování | cs |
| dc.subject | Open MPI | cs |
| dc.subject | HDF5 | cs |
| dc.subject | Lustre | cs |
| dc.subject | superpočítač | cs |
| dc.subject | I/O | cs |
| dc.subject | zápis | cs |
| dc.subject | velké množství dat | cs |
| dc.subject | optimalizace | cs |
| dc.subject | k-Wave | en |
| dc.subject | Parallel Programming | en |
| dc.subject | Open MPI | en |
| dc.subject | Message Passing Interface | en |
| dc.subject | HDF5 | en |
| dc.subject | Hierarchical Data Format | en |
| dc.subject | Lustre | en |
| dc.subject | Supercomputer | en |
| dc.subject | I/O | en |
| dc.subject | Write | en |
| dc.subject | Big Data | en |
| dc.subject | Optimization | en |
| dc.title | Optimalizace distribuovaného I/O subsystému projektu k-Wave | cs |
| dc.title.alternative | Optimization of the Distributed I/O Subsystem of the k-Wave Project | en |
| dc.type | Text | cs |
| dc.type.driver | bachelorThesis | en |
| dc.type.evskp | bakalářská práce | cs |
| dcterms.dateAccepted | 2014-06-17 | cs |
| dcterms.modified | 2020-05-10-16:11:46 | cs |
| eprints.affiliatedInstitution.faculty | Fakulta informačních technologií | cs |
| sync.item.dbid | 79932 | en |
| sync.item.dbtype | ZP | en |
| sync.item.insts | 2021.11.22 23:59:04 | en |
| sync.item.modts | 2021.11.22 23:14:35 | en |
| thesis.discipline | Informační technologie | cs |
| thesis.grantor | Vysoké učení technické v Brně. Fakulta informačních technologií. Ústav počítačových systémů | cs |
| thesis.level | Bakalářský | cs |
| thesis.name | Bc. | cs |
Files
Original bundle
1 - 1 of 1
Loading...
- Name:
- review_79932.html
- Size:
- 1.46 KB
- Format:
- Hypertext Markup Language
- Description:
- review_79932.html