| | SLO | ENG | Piškotki in zasebnost

Večja pisava | Manjša pisava

Izpis gradiva Pomoč

Naslov:Vpliv priprave nestrukturiranih podatkov na klasifikacijo : magistrsko delo
Avtorji:ID Pečnik, Špela (Avtor)
ID Podgorelec, Vili (Mentor) Več o mentorju... Novo okno
Datoteke:.pdf MAG_Pecnik_Spela_2019.pdf (1,49 MB)
MD5: EBA9DB0F5212AE2FD45F57091E57B407
PID: 20.500.12556/dkum/239e9d35-e8c8-4fbf-8461-28041dd87704
 
Jezik:Slovenski jezik
Vrsta gradiva:Magistrsko delo/naloga
Tipologija:2.09 - Magistrsko delo
Organizacija:FERI - Fakulteta za elektrotehniko, računalništvo in informatiko
Opis:V vsakdanjem življenju se v večini primerov srečujemo z nestrukturiranimi podatki v obliki besedil iz različnih virov. Število teh iz dneva v dan narašča, zato obstaja vse večja potreba po njihovi organizaciji in kategorizaciji. Pri teh podatkih je najpomembnejša njihova predpriprava na uporabo v algoritmih strojnega učenja. Za ustrezno pripravo besedila lahko uporabimo različne metode/tehnike predprocesiranja – besedilo pretvorimo v male črke, iz njega odstranimo stop-besede, nad posameznimi besedami uporabimo krnjenje, lematizacijo, besede sestavljamo v fraze različnih dolžin (uni-grame, bi-grame, tri-grame) ali pa jih na primer pretvorimo v vektorsko obliko (ang. word embedding). S pomočjo laboratorijskega eksperimenta smo ugotovili, da nekatere tehnike predobdelave bolj vplivajo na uspešnost klasifikacije kot druge, poleg tega pa ima velik vpliv na uspešnost klasifikacije sam jezik in količina besedila, ter klasifikator, ki ga uporabimo za strojno učenje.
Ključne besede:nestrukturirani podatki, klasifikacija besedil, vektorska predstavitev besedil, krnjenje, lematizacija
Kraj izida:Maribor
Kraj izvedbe:Maribor
Založnik:Š. Pečnik
Leto izida:2019
Št. strani:VIII, 74 str.
PID:20.500.12556/DKUM-73712 Novo okno
UDK:004.94:004.83(043.2)
URN:URN:SI:UM:DK:MLJBF77J
COBISS.SI-ID:22489366 Novo okno
NUK URN:URN:SI:UM:DK:MLJBF77J
Datum objave v DKUM:14.06.2019
Število ogledov:1813
Število prenosov:271
Metapodatki:XML DC-XML DC-RDF
Področja:KTFMB - FERI
:
Kopiraj citat
  
Skupna ocena:(0 glasov)
Vaša ocena:Ocenjevanje je dovoljeno samo prijavljenim uporabnikom.
Objavi na:Bookmark and Share



Postavite miškin kazalec na naslov za izpis povzetka. Klik na naslov izpiše podrobnosti ali sproži prenos.

Licence

Licenca:CC BY-NC-ND 4.0, Creative Commons Priznanje avtorstva-Nekomercialno-Brez predelav 4.0 Mednarodna
Povezava:http://creativecommons.org/licenses/by-nc-nd/4.0/deed.sl
Opis:Najbolj omejujoča licenca Creative Commons. Uporabniki lahko prenesejo in delijo delo v nekomercialne namene in ga ne smejo uporabiti za nobene druge namene.
Začetek licenciranja:05.06.2019

Sekundarni jezik

Jezik:Angleški jezik
Naslov:The impact of preprocessing on the classification of unstructured data
Opis:In everyday life, in most cases we encounter unstructured data in the form of texts from different sources. The number of these is growing every day, so there is an increasing need for their organization and categorization. For these data, the most important part is their pre-preparation for use in machine learning algorithms. Various methods/techniques of pre-processing can be used for the proper preparation of the text - we can convert the text into lower case letters, remove the stop-words from it, use stemming, lemmatization, compose words in phrases of different lengths (unigrams, bigrams, trigrams), or convert them into word embedding. With the help of a laboratory experiment, we found out that some pre-preparation techniques have a greater impact on the performance of the classification than others, and in addition, the language and quantity of the text, as well as the classifier used for machine learning, have a great influence on the success of the classification.
Ključne besede:unstructured data, text classification, word embedding, stemming, lemmatization


Komentarji

Dodaj komentar

Za komentiranje se morate prijaviti.

Komentarji (0)
0 - 0 / 0
 
Ni komentarjev!

Nazaj
Logotipi partnerjev Univerza v Mariboru Univerza v Ljubljani Univerza na Primorskem Univerza v Novi Gorici