20.500.12556/DKUM-74519 Izdelava porazdeljenega večnitnega ter razširljivega spletnega pajka za iskanje datotek diplomsko delo Implementation of a distributed multi-threaded and extensible web crawler for finding files V diplomskem delu smo izdelali spletnega pajka, ki je enostaven za uporabo, združuje funkcionalnosti odprtokodnih alternativ in deluje na vseh popularnih platformah. Uporabili smo tehnologijo .NET Core, ki nam je omogočila ustvarjanje le ene izvršilne datoteke za vsako platformo, ki je hkrati prenosljiva in deluje brez dodatnih sistemskih potreb. Da bi bila uporaba enostavna, smo implementirali spletni vmesnik za hitro konfiguracijo. Za funkcionalnost smo poskrbeli tako, da pajek deluje brezhibno na več nitih, v razširljivem porazdeljenem sistemu in podpira razširjanje s pomočjo uporabnikovih skript. Nazadnje smo tudi poskrbeli, da smo vključili vse funkcionalnosti, ki so značilne za spletne pajke. In our thesis, we created a web crawler that is easy to use, supports various features from multiple open-source alternatives and is cross-platform software. For this reason, we used the .NET Core technology to create a single portable executable file for each platform that worked without any extra system requirements. For ease of use, we implemented a web interface for quick configuration. For the main features, we made sure the crawler supported working on multiple threads, in a scalable distributed system and that it supported user extensions. Lastly, we also made sure to include functionalities that are typical for web crawlers. spletni pajek porazdeljeni sistemi spletni vmesnik .NET Core web crawler distributed systems web interface .NET Core true true false [A. Veselič] Slovenski jezik Angleški jezik Diplomsko delo/naloga 2019-08-29 17:30:55 2019-11-22 09:35:13 2022-08-09 09:11:42 2020-01-09 03:15:15 2019 0 Maribor 0 Maribor XIV, 46 str. 0000-00-00 NiDoloceno NiDoloceno NiDoloceno 0000-00-00 0000-00-00 0000-00-00 004.777(043.2) 22900502 URN:SI:UM:DK:GVWZBJAO UN_Veselic_Adam_2019.pdf UN_Veselic_Adam_2019.pdf 1 A95A80A38304C030F5BAE56E55DBF8C7 fb99643d559240516ce70f8541aebc7576ba098b38bf28f3ff1c5adf2c9d9099 dc8df58b-7c10-11eb-bb7a-00155d0001ca 20.500.12556/dkum/436f079f-5a8f-4619-b776-acc15ae39c23 https://dk.um.si/Dokument.php?lang=slv&id=136604 Fakulteta za elektrotehniko, računalništvo in informatiko 0 0 0