タイ語のサジェストを日本人の俺が頑張った道のり

第34回Elasticsearch勉強会「LT&忘年会」( https://www.meetup.com/ja-JP/Tokyo-Elastic-Fantastics/events/266551992/ ) でのLTの公開用スライドです。

Transcript

1. ʓʓͷαδΣετΛ ʓʓͷԶ͕
   ؤுͬͨ
   ಓͷΓ
   FMBTUJDTFBSDIKQ
   ๨೥ձ
   -5
   !QJLBUFOPS
2. ࣌͸ฏ੒๭೔
3. ϓϥϯφʔʮ
4. ϓϥϯφʔʮ
   ΞϓϦͷݕࡧ૭ʹ

5. ϓϥϯφʔʮ
   ΞϓϦͷݕࡧ૭ʹ
 หลายรส
6. ϓϥϯφʔʮ
   ΞϓϦͷݕࡧ૭ʹ
 หลายรส
   ͬͯ
   ೖΕͯ΋
   
7. ϓϥϯφʔʮ
   ΞϓϦͷݕࡧ૭ʹ
 หลายรส
   ͬͯ
   ೖΕͯ΋
   หลายรส
   ทองหล่อ
   ͕
   αδΣετ͞Εͳ͍
   ͷ͸
   
8. ϓϥϯφʔʮ
   ΞϓϦͷݕࡧ૭ʹ
 หลายรส
   ͬͯ
   ೖΕͯ΋
   หลายรส
   ทองหล่อ
   ͕
   αδΣετ͞Εͳ͍
   ͷ͸
   ͳΜͰʁ
9. 
 หลายรส
   
   
   
   หลายรส
   ทองหล่อ
10. ࣮ࡍͷ*TTVF
12. 5IBJ
    -BOHVBHF ภาษาไทย
13. λΠޠͷαδΣετΛ
 ೔ຊਓͷԶ͕
    ؤுͬͨ
    ಓͷΓ
    FMBTUJDTFBSDIKQ
    ๨೥ձ
    -5
    !QJLBUFOPS
14. - vision - ৯
    Λ
    ௨
    ͡
    ͯ
 ੈ
    ք
    த
    ͷ
    ਓ
    ʑ
    Λ
    )BQQZ
    ʹ ৴པͰ͖Δਓ͔Β୳͢
    ੍໊࣮άϧϝαʔϏε  ສ."6
    ւ֎Χࠃʹਐग़த What is ? )POH
    ,POH 5IBJMBOE
15. ͦΜͳ͜ΜͳͰλΠޠݕࡧͷվળʹऔΓ૊Έ࢝Ίͨ
    !QJLBUFOPS
    ޚҰߦ Ұ໊ ͕ͩͬͨʜʜ
16. ͕͜͜ਏ͍ΑλΠޠ
17. ͕͜͜ਏ͍ΑλΠޠ ಡΊͳ͍
18. 3FUUZ
    (MPCBM
    5FBN
    ʹ͍ͭͯ ϓϥϯφʔ
    
    
    ೔ຊͱλΠΛ୯ৼಈͯͯͭ͠Α͍
    
    
    ΤϯδχΞ
    
    
    جຊతʹωΠςΟϒΞϓϦ։ൃऀ͕ϝΠϯ

    
    ݕࡧܥͷΈ
    8FC
    νʔϜʹ࿩͕΍ͬͯ͘Δ
    
    
    ׂͱΈΜͳࠃ಺ۀ຿ͱ݉຿
    
    
    λΠޠ࿩ऀ͸͍ͳ͍
    
    
    
    ݱ஍ΦϑΟε
    
    
    σʔλ֦ॆͱίϛϡχςΟϚωδϝϯτ͕ϝΠϯʢٕज़ܥελοϑ͓Βͣʣ
19. ͨͪ͸͔ͩΔน 壁① ݴޠͷน 壁② Ϧιʔεͷน
20. ͢͢Ί͔ͨ
    
    
    
    
    
    ݕࡧχʔζͷ೺Ѳ͕ࠔ೉
    ˠͱʹ͔͘େྔʹࣄྫΛूΊΔ
    壁
21. ͢͢Ί͔ͨ ͜ͷαΠΫϧΛͻͨ͢Β܁Γฦ͢ײ͡ʹ ໦ ۚ ౔ ೔ ݄ Ր ਫ ɾ࣮૷ ɾ2"
    ɾϦϦʔε ɾݱ஍ϝϯόʔ࢖༻ײௐࠪ ɾϑΟʔυόοΫ
    
    
    
    
    
    
    
    
    
    Քಇ͕࣌ؒݶΒΕΔ 壁
22. 3FUUZ
    (MPCBM
    γεςϜ໘ 
    &MBTUJDTFBSDI
    ඪ४
    4VHHFTUFS
    Ͱ͸ͳ͘௨ৗͷ
    *OEFY
    Λ࢖ͬͯ
    *ODSFNFOUBM
    4FBSDI
     ӳޠλΠޠ޿౦ޠ
    Λಉ࣌ʹݕࡧ͍ͯ͠Δ
    
    ˞(MPCBM
    ϦϦʔε౰࣌ͷཁٻʹجͮ͘
    
    
    
    { ※ΠϝʔδͰ͢ "query": { "multi_match": { "query": "ΒͿΏʔ", "fields": [ "restaurant_name-en", "restaurant_name-th", "restaurant_name-zh_cn" ] } } 壁 壁③ ٕज़ͷน
23. 3FUUZ
    (MPCBM
    γεςϜ໘  ݕূ؀ڥʹ๡͍͠
     ΞϓϦ༻"1*αʔόʔ
    TUH
    ͷΈ
     &MBTUJDTFBSDI
    Ϋϥελ
    ຊ൪ͷΈ
     ݕূͯ͠΋Β͏ʹ΋ݱ஍ϝϯόʔͷٕज़తαϙʔτ͕ࠔ೉
    壁 壁 壁 ໦ ۚ ౔ ೔ ݄ Ր ਫ ɾ࣮૷ ɾ2"
    ɾϦϦʔε ɾݱ஍ϝϯόʔ࢖༻ײௐࠪ ɾϑΟʔυόοΫ
24. 3FUUZ
    (MPCBM
    γεςϜ໘  ݕূ؀ڥʹ๡͍͠
     ΞϓϦ༻"1*αʔόʔ
    TUH
    ͷΈ
     &MBTUJDTFBSDI
    Ϋϥελ
    ຊ൪ͷΈ
     ݕূͯ͠΋Β͏ʹ΋ݱ஍ϝϯόʔͷٕज़తαϙʔτ͕ࠔ೉
    壁 壁 壁 ໦ ۚ ౔ ೔ ݄ Ր ਫ ɾ࣮૷ ɾ2"
    ɾݱ஍ϝϯόʔ࢖༻ײௐࠪ ɾϑΟʔυόοΫ ΍͹ͦ͏ͳػೳ
    ɾTUHϦϦʔε
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    ɾຊ൪
    (P
    PS
    /P(P
25. 3FUUZ
    (MPCBM
    γεςϜ໘  ݕূ؀ڥʹ๡͍͠
     ΞϓϦ༻"1*αʔόʔ
    TUH
    ͷΈ
     &MBTUJDTFBSDI
    Ϋϥελ
    ຊ൪ͷΈ
     ݕূͯ͠΋Β͏ʹ΋ݱ஍ϝϯόʔͷٕज़తαϙʔτ͕ࠔ೉
    壁 壁 壁 ໦ ۚ ౔ ೔ ݄ Ր ਫ ɾ࣮૷ ɾ2" ɾݱ஍ϝϯόʔ࢖༻ײௐࠪ ɾϑΟʔυόοΫ ΍͹ͦ͏ͳઃఆ
    ɾຊ൪൓ө

    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    ɾ଎߈Ͱ໭͢
    PS
    (P ΍͹ͦ͏ͳػೳ
    ɾTUHϦϦʔε
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    
    ɾຊ൪
    (P
    PS
    /P(P
26. ࠷ޙͷ
    
    
    
    
    ɺ&MBTUJDTFBSDI 
    ͱ͸͍͑ݩʑͷΫΤϦNBQQJOH͕Α͘ͳ͍͜ͱ͕ଟ͔ͬͨ
     ͳ͔ͥ
    "filter" → "query"
    ʹ
     "thai_tokenizer" → "icu_tokenizer"
 壁
27. ࠷ޙͷ
    
    
    
    
    ɺ&MBTUJDTFBSDI  "edge_ngram"
    ϕʔεͷӳޠϑΟʔϧυͱ෼͔ͪॻ͖
    "thai_tokenizer"
    ϕʔεͷ
 ϑΟʔϧυΛ
    "multi_match"
    Ͱݕࡧͯͨ͠
    ˠ
    ࣙॻϕʔε෼͔ͪॻ͖
    "icu_tokeinzer"
    Ͱ෼཭ͨ͋͠ͱ
    "edge_ngram"
    ͷ

    
    
    
    GJMUFS
    Ͱ
    UPLFOJ[F
    ͢Δ߹͍ͷࢠ
    BOBMZ[FS
    Λఆٛͨ͠
 壁 "filter": { "engram_filter": { "type": "edge_ngram", "min_gram": "1", "max_gram": "12" } } "analyzer": { "thai_engramlike_analyzer": { "filter": [ "engram_filter" ], "char_filter": [ "icu_normalizer" ], "type": "custom", "tokenizer": "icu_tokenizer" } }
28. ·ͱΊ • ݴޠͷ壁ɺϦιʔεͷ壁ɺٕज़ͷ壁
    • ৭ʑͱॿ͚Λಘͳ͕Βͷ஍ಓͳಓͷΓͰͨ͠
    • ੜͷݕࡧχʔζͷ೺Ѳ͸େࣄ
 • λΠޠΘ͔ΔΤϯδχΞॿ͚ͯ͘Εʂ
29. Image Credits: Olesya Tseytlin/Shutterstock.com, "fritened cat". [Proprietary] Jean Beaufort, "Orion Nebula". https://www.publicdomainpictures.net/en/view-image.php?image=210557 [PD] 5IBOL
    ZPV
    GPS
    -JTUFOJOH