Full-text search - Speaker Deck

Slide 1

Slide 1 text

Računalna obrada teksta Janko Marohnić Voditelj rada: prof. dr. sc. Robert Manger

Slide 2

Slide 2 text

Pretraživanje (punog teksta)

Slide 3

Slide 3 text

Diskretno pretraživanje Organski uzgojena hrana …Najnovije istraživanje oko uzgoja hrane sugerira da je organski uzgojena hrana zdravija od konvencionalno uzgojene hrane, no ono nije dobro odjeknulo u svim znanstvenim krugovima… …Organski uzgojena hrana nije bitno zdravija niti ima bitno veće nutritivne vrijednosti, samo je bitno skuplja, zaključili su istraživači s uglednog američkog sveučilišta Stanford nakon niza provedenih istraživanja… …U SAD-u se prakticira obrada organskih vrtova, u kojem se hrana koja se uzgaja ne šprica pesticidima…

Slide 4

Slide 4 text

Pretraživanje punog teksta Organski uzgojena hrana …Najnovije istraživanje oko uzgoja hrane sugerira da je organski uzgojena hrana zdravija od konvencionalno uzgojene hrane, no ono nije dobro odjeknulo u svim znanstvenim krugovima… …Organska hrana nije bitno zdravija niti ima bitno veće nutritivne vrijednosti, samo je bitno skuplja, zaključili su istraživači s uglednog američkog sveučilišta Stanford nakon niza provedenih istraživanja… …U SAD-u se prakticira obrada organskih vrtova, u kojem se hrana koja se uzgaja ne šprica pesticidima…

Slide 5

Slide 5 text

Slide 6

Slide 6 text

1. Indeksiranje 2. Upit 3. Rangiranje 4. Prikaz podatka

Slide 7

Slide 7 text

1. Indeksiranje

Slide 8

Slide 8 text

.pdf .doc .odt .html .rtf .ppt .xls .txt Preprocesiranje

Slide 9

Slide 9 text

Analiza Detekcija rečenica Brojni stručnjaci ističu kako moderna prehrambena industrija koristi veliki broj sintetskih kemikalija, a mnoge od njih imaju potencijal oštetiti zdravlje ljudi koji su izloženi njihovim visokim koncentracijama ili čak i nižim koncentracijama, ali u duljem vremenskom periodu. Sve više ljudi postaje svjesno bezbrojnih kemikalija u konvencionalno proizvedenoj hrani. Iako su svi prehrambeni proizvodi morali proći nekakav test sigurnosti i kvalitete da bi dospjeli na tržište, većina testova provedena je uz financiranje tih istih proizvođača, tako da rezultat ne može biti potpuno objektivan.

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Analiza Tokenizacija Organski uzgojena hrana ne koristi kemikalije i pesticide.

Slide 12

Slide 12 text

Analiza Tokenizacija Organski uzgojena hrana ne koristi kemikalije i pesticide

Slide 13

Slide 13 text

Analiza Normalizacija veličine slova Organski uzgojena hrana ne koristi kemikalije i pesticide

Slide 14

Slide 14 text

Analiza Normalizacija veličine slova organski uzgojena hrana ne koristi kemikalije i pesticide

Slide 15

Slide 15 text

Analiza Eliminacija stop-riječi organski uzgojena hrana ne koristi kemikalije i pesticide

Slide 16

Slide 16 text

Analiza Eliminacija stop-riječi organski uzgojena hrana koristi kemikalije pesticide

Slide 17

Slide 17 text

Analiza Korjenovanje organsko uzgojeno hrana koristiti kemikalija pesticid

Slide 18

Slide 18 text

Analiza Normalizacija dijakritičkih znakova čevapčić cevapcic ↓

Slide 19

Slide 19 text

Spremanje Organski uzgojena hrana ne koristi kemikalije i pesticide. organsko 1 uzgojeno 2 hrana 3 koristi 5 kemikalija 6 pesticid 8 … Invertirani indeks

Slide 20

Slide 20 text

2. Upit

Slide 21

Slide 21 text

Dodavanje sinonima pećina pećina OR špilja

Slide 22

Slide 22 text

Ispravljanje zatipaka New Yrok New York

Slide 23

Slide 23 text

Ispravljanje zatipaka Damerau-Levenshteinova udaljenost • umetanje • brisanje • supstitucija • transpozicija

Slide 24

Slide 24 text

Ispravljanje zatipaka n-gram udaljenost udaljenost uda dalj alje ljen eno nos ost

Slide 25

Slide 25 text

Ispravljanje zatipaka Double Metaphone Jeff " Geoff

Slide 26

Slide 26 text

Ključne riječi tijelo željezo

Slide 27

Slide 27 text

Fraze “svjetski kup”

Slide 28

Slide 28 text

Booleovi operatori AND, OR, NOT jabuke AND banane

Slide 29

Slide 29 text

Zamjenski znakovi bank* banka bankar bankarstvo bankariti …

Slide 30

Slide 30 text

Specificiranje polja naslov:matematika godina:>1985

Slide 31

Slide 31 text

Automatsko nadopunjavanje atletika atletika atlanta at&t atrakcija

Slide 32

Slide 32 text

3. Rangiranje

Slide 33

Slide 33 text

Model vektorskog polja 1. “Ivica Kostelić odnosi pobjedu u skijaškom kupu” 2. “Janica Kostelić odnosi pobjedu u svjetskom prvenstvu” 1 ivica 2 janica 3 kostelić 4 odnosi 5 pobjedu 6 u 7 skijaškom 8 svjetskom 9 kupu 10 prvenstvu 1. (1, 0, 1, 1, 1, 1, 1, 0, 1, 0) 2. (0, 1, 1, 1, 1, 1, 0, 1, 0, 1)

Slide 34

Slide 34 text

Model vektorskog polja Upit Dokument 0° = potpuno podudaranje upita i dokumenta relevantnost = cos α

Slide 35

Slide 35 text

Težina riječi TF-IDF Term Frequency Inverse Document Frequency vektor · TF IDF

Slide 36

Slide 36 text

Težina polja

Slide 37

Slide 37 text

Blizina riječi Organski uzgojena hrana U organskim vrtovima se uzgaja hrana…

Slide 38

Slide 38 text

4. Prikaz rezultata

Slide 39

Slide 39 text

Paginacija dokument 2 dokument 3 dokument 4 dokument 5 dokument 6 dokument 7 dokument 1 … stranica 1 stranica 2

Slide 40

Slide 40 text

Isticanje …Najnovije istraživanje oko uzgoja hrane sugerira da je organski uzgojena hrana zdravija od konvencionalno uzgojene hrane, no ono nije dobro odjeknulo u svim znanstvenim krugovima…