Share
Embed
さわってみよう ベクトル・データベース watsonx.dataでRAG体験 / IBMTechXchangeJP-2024-HandsOn8-1
IBM TechXchange Japan 2024
2024年11月27日(水)
会場:ホテル雅叙園東京
watsonxハンズオン 12:00-13:40
[8-1]さわってみよう ベクトル・データベース watsonx.dataでRAG体験
セッション資料
ハンズオン資料はこちら: https://github.com/IBM/japan-technology/tree/main/techxchange/2024-watsonx-handson-1
セッション動画はこちら: https://video.ibm.com/playlist/686198/video/134144336
Kyoko Nishito
November 27, 2024
Transcript
27 slides
-
"TLUIF 4QFBLFS ࣸਅࡱӨ ಈըࡱӨ ࢿྉެ։ 4/4֦ࢄ • ϋϯζΦϯதʹ ڍखͰ࣭͘͝ ͍ͩ͞
• ηογϣϯʹ 2ˍ"λΠϜ͋Γ ̋ ̋ ̋ ̋ *#.5FDI9DIBOHF ͞ΘͬͯΈΑ͏ϕΫτϧɾσʔλϕʔε XBUTPOYEBUBͰ3"(ମݧ -
ຊΞΠɾϏʔɾΤϜגࣜձࣾ ςΫϊϩδʔࣄۀຊ෦ XBUTPOYࣄۀ෦ %BUB"*ςΫχΧϧεϖγϟϦετ • ຊ*#.ʹͯओʹ*#.ͷࣾγεςϜ։ൃɾอकʹैࣄ͠ɺཁ ݅ఆ͔ٛΒอक·Ͱɺ։ൃऀɾ1.ɾΞʔΩςΫτͱͯ͠ຊɺ "1֤ࠃͷੜ࢈ཧγεςϜߪങγεςϜɺ*5ࢿ࢈ཧγες Ϝ ɺ෯͘ܦݧ͖ͯ͠·ͨ͠ɻͦͷޙ*#.%FWFMPQFS
"EWPDBUFͱͯ͠։ൃऀͷܒ׆ಈΛߦ͍ͬͯ·ͨ͠ɻ • ݱࡏ%BUBBOE"*ςΫχΧϧεϖγϟϦετͱͯ͠ɺ*#. σʔλϕʔεܥΛ୲͍ͯ͠·͢ɻ • 8PNFOJO%BUB4DJFODF 5PLZP!*#.։࠵ • ୈ ճ ຊ౷ܭֶձ౷ܭڭҭ ड ށژࢠ github.com/kyokonishito x.com/KyokoNishito www.linkedin.com/in/kyokonishito qiita.com/nishikyon speakerdeck.com/kyokonishito -
ੜ"*ͱͯศརʂ ͜ͷϑϥϯεֵ໋ʹ ͍ͭͯڭ͑ͯ ͜ͷจষΛཁͯ͠ 9999 ͜ͷจষΛӳ༁ͯ͠ 9999 ੜ"* ࣭ ϑϥϯεֵ໋
999999999999999 ཁ ::::::::::::::: ::::::::::::::: ::::::::::: ճ -
͔͠͠ɺֶश͍ͯ͠ͳ͍͜ͱͷճෆਖ਼֬Ͱ͢࠷৽ใ υδϟʔεେ୩͕ Λୡͨ͠ ݄Λڭ͑ͯ ੜ"* ࣭ େ୩ᠳฏͷୡ େ୩ᠳฏɺ.-#্࢙ॳ Ίͯγʔζϯຊྥଧ ͱ౪ྥͷҒۀΛୡ
͕ͨ͠ɺ·ͩୡ͍ͯ͠ ·ͤΜɻେ୩ᠳฏϩα ϯθϧεɾΤϯθϧεͰ ׆༂͍ͯ͠Δ͕ɺ ΫϥϒೖΓ·࣮ͩݱ͠ ͍ͯ·ͤΜɻ ճ ࣮ࡍͷMMBNBCJOTUSVDUͷճͰ͢ -
͔͠͠ɺֶश͍ͯ͠ͳ͍͜ͱͷճෆਖ਼֬Ͱ͢࠷৽ใ υδϟʔεେ୩͕ Λୡͨ͠ ݄Λڭ͑ͯ ੜ"* ࣭ େ୩ᠳฏͷୡ େ୩ᠳฏɺ.-#্࢙ॳ Ίͯγʔζϯຊྥଧ ͱ౪ྥͷҒۀΛୡ
͕ͨ͠ɺ·ͩୡ͍ͯ͠ ·ͤΜɻେ୩ᠳฏϩα ϯθϧεɾΤϯθϧεͰ ׆༂͍ͯ͠Δ͕ɺ ΫϥϒೖΓ·࣮ͩݱ͠ ͍ͯ·ͤΜɻ ֶशσʔλͷͷԼ ͜Ε࠷ۙͷใ ৽ֶ͗ͯ͢͠शͰ͖ͯͳ͍ ճ ࣮ࡍͷMMBNBCJOTUSVDUͷճͰ͢ -
͔͠͠ɺֶश͍ͯ͠ͳ͍͜ͱͷճෆਖ਼֬Ͱ͢ඇެ։ใ ຊ*#.ೖࣾ Կ༗څͱΕ· ͔͢ ੜ"* ࣭ ຊ*#.ͷೖࣾͷ༗ څٳՋ ຊ*#.ͷೖࣾͷ༗ څٳՋɺͰ͢ɻ
ຊ*#.Ͱɺೖࣾͷ݄ ͔Βཌͷ݄· ͰΛͱͯ͠ܭࢉ͠ɺ ೖࣾͷ༗څٳՋ ؒ༩͞Ε·͢ɻ ճ ࣮ࡍͷMMBNBCJOTUSVDUͷճͰ͢ -
͔͠͠ɺֶश͍ͯ͠ͳ͍͜ͱͷճෆਖ਼֬Ͱ͢ඇެ։ใ ຊ*#.ೖࣾ Կ༗څͱΕ· ͔͢ ੜ"* ࣭ ຊ*#.ͷೖࣾͷ༗ څٳՋ ຊ*#.ͷೖࣾͷ༗ څٳՋɺͰ͢ɻ
ຊ*#.Ͱɺೖࣾͷ݄ ͔Βཌͷ݄· ͰΛͱͯ͠ܭࢉ͠ɺ ೖࣾͷ༗څٳՋ ؒ༩͞Ε·͢ɻ ͦͦ͜Μͳࣾใ֎෦ ʹͳ͍ͷͰֶशͰ͖ͳ͍ ޡͬͨใͷੜ ʢϋϧγωʔγϣϯʣ ճ ࣮ࡍͷMMBNBCJOTUSVDUͷճͰ͢ -
ղܾࡦ४උͨ͠ਖ਼͍͠ใ͔ΒճΛੜ͢Δʮ3"(ʯ Ϣʔβʔ ࣭จ ݕࡧ ϓϩϯϓτ ੜ"*Ϟσϧ --. ੜ͞Εͨճ ্Ґͷݕࡧ݁Ռ ࣭จΛݩʹݕࡧ
اۀಠࣗͷใ ਖ਼֬ͳ࠷৽ใ ࢦࣔจ ࣭จ ݕࡧ݁Ռ 3"( 3FUSJFWBM"VHNFOUFE(FOFSBUJPO اۀಠࣗͷใਖ਼֬ͳ࠷৽ใ͔Βɺੜ"*Ϟσϧ --. ʹճΛੜͤ͞ΔΈͰ͢ɻ ੜ"*Ϟσϧ͕ࣄલʹֶश͍ͯ͠Δใ͔ΒճΛੜ͢ΔͷͰͳ͘ɺ·ͣճΛੜ͢ ΔͨΊʹඞཁͳใΛݕࡧ͠ɺͦͷใΛੜ"*Ϟσϧʹೖྗͯ͠ճΛੜͤ͞·͢ɻ ϓϩϯϓτ ʜϞσϧʹରͯ͠ࢦࣔྫจɺ ճͷݩͱͳΔใΛ༩͑ΔͨΊͷೖྗςΩ ετจ -
ղܾࡦ४උͨ͠ਖ਼͍͠ใ͔ΒճΛੜ͢Δʮ3"(ʯ Ϣʔβʔ ࣭จ ݕࡧ ϓϩϯϓτ ੜ"*Ϟσϧ --. ੜ͞Εͨճ ্Ґͷݕࡧ݁Ռ ࣭จΛݩʹݕࡧ
اۀಠࣗͷใ ਖ਼֬ͳ࠷৽ใ ࢦࣔจ ࣭จ ݕࡧ݁Ռ 3"( 3FUSJFWBM"VHNFOUFE(FOFSBUJPO اۀಠࣗͷใਖ਼֬ͳ࠷৽ใ͔Βɺੜ"*Ϟσϧ --. ʹճΛੜͤ͞ΔΈͰ͢ɻ ੜ"*Ϟσϧ͕ࣄલʹֶश͍ͯ͠Δใ͔ΒճΛੜ͢ΔͷͰͳ͘ɺ·ͣճΛੜ͢ ΔͨΊʹඞཁͳใΛݕࡧ͠ɺͦͷใΛੜ"*Ϟσϧʹೖྗͯ͠ճΛੜͤ͞·͢ɻ ΩʔϫʔυݕࡧͰͳ͘ ϕΫτϧσʔλͰྨࣅݕࡧΛ ͠·͢ ϕΫτϧσʔλΛྨࣅݕࡧͰ͖Δ ϕΫτϧ%#Λ͍·͢ -
3"(ͷͨΊʹඞཁͳͷ ϕΫτϧσʔλ ϕΫτϧ ۭؒͰදݱ ϕΫτϧԽ ը૾จॻͷಛ͕ίϯύΫτʹ؆୯ ʹΘ͔ΔΑ͏ʹσʔλΛʮϕΫτϧʯ ͱݺΕΔͷྻʹม͢Δ͜ͱ ͜ͷϕΫτϧԽͨ͠σʔλ͕ ϕΫτϧσʔλ
ಛ͕͍ۙͷ ϕΫτϧۭؒͰͷڑ͕͍ۙ ʹࣅ͍ͯΔ ྨࣅ͕ߴ͍ ϕΫτϧͰൺֱ͠ྨࣅ͕ߴ͍ͷΛ ݕࡧ͢Δͷ͕ྨࣅݕࡧ ܞଳ< ɾɾɾɾ> εϚϗ< ɾɾɾ> ίϯϐϡʔλʔ< ɾɾ> େࠜ< ɾɾɾ> ʮܞଳʯͱ ͷྨࣅ εϚϗ ίϯϐϡʔ λʔ େࠜ ίαΠϯྨࣅ ʹ͍ۙ΄Ͳྨࣅ ͕ߴ͍ ܞଳ εϚϗ ίϯϐϡʔ λʔ େࠜ ΠϝʔδਤͰ͢ В В` В`` -
3"(ͷͨΊʹඞཁͳͷ ϕΫτϧɾσʔλϕʔε • ϕΫτϧɾσʔλΛ֨ೲɺཧɺݕࡧ͢ΔͨΊʹઃܭ͞Εͨσʔλϕʔε • ߴޮ͔ͭߴʹྨࣅݕࡧՄೳ • ྫ͑ɺจॻݕࡧɺը૾ݕࡧԻݕࡧʹ͓͍ͯɺ͋ΔϕΫτϧͱྨࣅͨ͠ಛ ੑΛ࣋ͭσʔλΛૉૣ͘ݕࡧ͢Δ͜ͱ͕Մೳ ΠϯσοΫεɾλΠϓ
ݕࡧํ๏ͱΠϯσοΫεɾλΠϓͷύϥϝʔλʔ λΠτϧ͕ϕΫτϧԽ͞Εͨͷ -
σʔλͷϕΫτϧԽɾૠೖͷྲྀΕ • ը૾ಈըɺԻɺςΩετͳͲͷσʔλɺʮ&NCFEEJOH.PEFMʯʹΑͬͯɺ ϕΫτϧԽ͞Ε·͢ɻ • ಛఆͷಛੑؔੑΛO࣍ݩͰදݱ͢Δ͜ͱͰɺίϯύΫτʹσʔλॲཧΛߦ͏ ͜ͱ͕Ͱ͖·͢ɻ &NCFEEJOHT .PEFM <
ɾɾɾ> < ɾɾɾ> < ɾɾɾ> < ɾɾɾ> < ɾɾɾ> < ɾɾɾ> ϕΫτϧ ɾσʔλ Λ ϕΫτϧ %#ૠೖ σʔλΛ ϕΫτϧԽ ը૾σʔλ 1%' KTPO UFYU ͳͲ ϕΫτϧ%# ϕΫτϧɾΠϯσοΫε ଐੑϑΟϧλϦϯά ɾɾɾ -
XBUTPOYEBUBϕΫτϧ%#.JMWVT͕͑·͢ • "*σʔλ׆༻ଅਐͷͨΊͷσʔλɾϓϥοτϑΥʔϜ • ̎ͭͷإ͕͋Γ·͢ʂ ϨΠΫϋεɾΞʔΩςΫ νϟʔ ใܥΠϯϑϥʹ͓͚Δ ѹతͳίετύϑΥʔϚ ϯεΛ࣮ݱ
ϕΫτϧ%# .JMWVT ͓٬༷ͷࢿ࢈Ͱ͋Δσʔλ Λͬͯੜ"*ͷΞτ ϓοτʹର͢Δ৴པੑΛ ্ ηϚϯςΟοΫɾΦʔτ ϝʔγϣϯ σʔλͷҙຯ͚ͮͱݕࡧॲ ཧΛ"*ͰڧԽ͠ΫΠοΫ͔ͭ ؆୯ʹཉ͍͠σʔλͷೖख͕ Մೳ ͓٬༷՝ʹର͢ΔιϦϡʔγϣϯ σʔλετΞ "*σʔλϕʔε "*ͷͨΊͷσʔλϕʔε"*ΈࠐΈܕͷ σʔλϕʔε ઌਐιϦϡʔγϣϯ -
XBUTPOYEBUBΤϯλʔϓϥΠζ༻ͷσʔλੳج൫ ϒϩοΫɾ ετϨʔδ ಠࣗ %# σʔλΤΞϋε *#.XBUTPOYEBUBͷػೳ Χλϩά࿈ܞͰ࣮ݱ ϨΠΫϋε ϝλσʔλαʔϏε
σʔλ Χλϩά σʔλ ΣΞϋε 1SFTUP 4QBSL *DFCFSHɺ)JWF 1BSRVFU 03$ "730 $47 +40/ σʔλϨΠΫ ΦϒδΣΫτɾ ετϨʔδ ಠࣗ %# ϢʔεέʔεʹԠͯ͡ସ σʔλҠಈͳ͘ɺ࣌ؒɺ ࢿݯɺίετݮ σʔλΨόφϯεΛ࣮ݱ ผαʔϏεͱ࿈ܞ .JMWVT • σʔλҠಈͤͣʹɺϨϙʔςΟϯάɺσʔλੳ"*ϫʔΫϩʔυ͚ʹ࠷దͳΤϯδϯΛબ͢Δ ͜ͱͰσʔλੳج൫ͷίετݮΛ͝ࢧԉ͠·͢ɻ -
XBUTPOYEBUB.JMWVTͱXBTUPOYBJج൫ϞσϧͰͷ3"(࣮ Ϣʔβʔ ࣭จ ྨࣅݕࡧ ϓϩϯϓτ ج൫Ϟσϧ XBUTPOYBJ ੜ͞Εͨճ ্Ґͷݕࡧ݁Ռ ࣭จΛݩʹݕࡧ
ࢦࣔจ ࣭จ ݕࡧ݁Ռ XBUTPOYEBUB .JMWVT ϕΫτϧ%# اۀಠࣗͷใ ਖ਼֬ͳ࠷৽ใ ͓٬༷ݸผσʔλ 1%' KTPO UFYUͳͲ ΛࣄલʹϕΫτϧ%# ʹೖΕ͓ͯ͘ ϕΫτϧԽ FNCFEEJOH ຊͷϋϯζΦϯͰ ࡞Γ·͢ʂ ϕΫτϧԽ FNCFEEJOH -
·ͱΊ XBTUPYEBUB.JMWVTͱXBTUPOYBJج൫ϞσϧͰͷ3"(࣮ Ϣʔβʔ ࣭จ ྨࣅݕࡧ ϓϩϯϓτ ج൫Ϟσϧ XBUTPOYBJ ੜ͞Εͨճ ্Ґͷݕࡧ݁Ռ
࣭จΛݩʹݕࡧ ࢦࣔจ ࣭จ ݕࡧ݁Ռ XBUTPOYEBUB .JMWVT ϕΫτϧ%# اۀಠࣗͷใ ਖ਼֬ͳ࠷৽ใ ͓٬༷ݸผσʔλ 1%' KTPO UFYUͳͲ ΛࣄલʹϕΫτϧ%# ʹೖΕ͓ͯ͘ ϕΫτϧԽ FNCFEEJOH XBUTPOYEBUBͷ.JMWVT • ੜ"*ͷճਫ਼্ • ࣗࣾͷσʔλΛ׆༻👍 ϕΫτϧԽ FNCFEEJOH -
ϫʔΫγϣοϓɺηογϣϯɺ͓Αͼࢿྉɺ*#.·ͨηογϣϯൃදऀʹΑͬͯ४උ͞ΕɺͦΕͧΕಠࣗͷݟղΛөͨ͠ͷͰ͢ɻͦΕΒใ ఏڙͷతͷΈͰఏڙ͞Ε͓ͯΓɺ͍͔ͳΔࢀՃऀʹରͯ͠๏త·ͨͦͷଞͷࢦಋॿݴΛҙਤͨ͠ͷͰͳ͘ɺ·ͨ*#.αʔϏε͕͓ ٬༷ʹద༻͋Δಛఆͷ๏ྩʹద߹͢Δ͜ͱΛอূ͢ΔͷͰ͋Γ·ͤΜɻຊߨԋࢿྉʹؚ·Ε͍ͯΔใʹ͍ͭͯɺશੑͱਖ਼֬ੑΛظ͢ΔΑ͏ Ί͓ͯΓ·͕͢ɺʮݱঢ়ͷ··ʯఏڙ͞Εɺ໌ࣔ·ͨࣔʹ͔͔ΘΒͣɺۀੑɺಛఆͷతͷద߹ੑɺඇ৵ੑΛؚΊɺ͍͔ͳΔอূΘͳ͍ ͷͱ͠·͢ɻຊߨԋࢿྉ·ͨͦͷଞͷࢿྉͷ༻ʹΑͬͯɺ͋Δ͍ͦͷଞͷؔ࿈ʹΑͬͯɺ͍͔ͳΔଛ͕ੜͨ͡߹ɺ*#.ΛෛΘͳ͍ ͷͱ͠·͢ɻ ຊߨԋࢿྉͰݴٴ͞ΕΔ*#.ɺϓϩάϥϜɺ·ͨαʔϏεɺ*#.͕ϏδωεΛߦ͍ͬͯΔͯ͢ͷࠃɾҬͰ͝ఏڙՄೳͳΘ͚ Ͱ͋Γ·ͤΜɻຊߨԋࢿྉͰݴٴ͞ΕΔকདྷͷలʢϦϦʔεػೳΛؚΉʣɺࢢػձ·ͨͦͷଞͷཁҼʹج͍ͮͯ*#.ಠࣗͷܾ ఆݖΛ͍ͬͯͭͰมߋͰ͖Δͷͱ͠ɺকདྷͷ·ͨػೳ͕༻ՄೳʹͳΔ͜ͱɺ͘͠ಛఆͷ݁ՌΛ֬͢Δ͜ͱΛҙਤ͢ΔͷͰ͋Γ ·ͤΜɻຊߨԋࢿྉɺݴٴ͞ΕΔ
*#.·ͨαʔϏεʹద༻͋Δܖ݅Λมߋ͢ΔͷͰɺՃͷද໌·ͨอূΛҙਤ͢ΔͷͰ͋Γ· ͤΜɻ ຊߨԋࢿྉʹؚ·Ε͍ͯΔ༰ɺࢀՃऀͷ׆ಈʹΑͬͯಛఆͷ݁Ռ͕ੜ͡Δͱड़Δɺ·ͨ҉ࣔ͢Δ͜ͱΛҙਤͨ͠ͷͰɺ·ͨͦͷΑ͏ͳ݁Ռ ΛੜΉͷͰ͋Γ·ͤΜɻ ύϑΥʔϚϯεɺཧ͞Εͨڥʹ͓͍ͯඪ४తͳ*#.ϕϯνϚʔΫΛ༻ͨ͠ଌఆͱ༧ଌʹج͍͍ͮͯ·͢ɻϢʔβʔ ͕ܦݧ͢Δ࣮ࡍͷεϧʔϓοτύϑΥʔϚϯεɺϢʔβʔͷδϣϒɾετϦʔϜʹ͓͚ΔϚϧνϓϩάϥϛϯάͷྔɺೖग़ྗߏɺετϨʔδߏɺ ͓Αͼॲཧ͞ΕΔϫʔΫϩʔυͳͲͷߟྀࣄ߲ΛؚΉɺଟ͘ͷཁҼʹԠͯ͡มԽ͠·͢ɻ͕ͨͬͯ͠ɺݸʑͷϢʔβʔ͕͜͜Ͱड़ΒΕ͍ͯΔͷͱ ಉ༷ͷ݁ՌΛಘΒΕΔͱ֬͢ΔͷͰ͋Γ·ͤΜɻهड़͞Ε͍ͯΔͯ͢ͷ͓٬༷ࣄྫɺͦΕΒͷ͓٬༷͕ͲͷΑ͏ʹ*#.Λ༻͔ͨ͠ɺ· ͨͦΕΒͷ͓٬༷͕ୡͨ݁͠Ռͷ࣮ྫͱͯࣔ͠͞ΕͨͷͰ͢ɻ࣮ࡍͷڥίετ͓ΑͼύϑΥʔϚϯεಛੑɺ͓٬༷͝ͱʹҟͳΔ߹͕͋Γ·͢ɻ *#.ɺ*#.ϩΰɺJCNDPNɺwatsonxɺwatsonx.aiäɺwatsonx.dataäɺ ੈքͷଟ͘ͷࠃͰొ͞Εͨ*OUFSOBUJPOBM#VTJOFTT.BDIJOFT$PSQPSBUJPO ͷඪͰ͢ɻଞͷ໊͓ΑͼαʔϏε໊ɺͦΕͧΕ*#.·֤ͨࣾͷඪͰ͋Δ߹͕͋Γ·͢ɻݱ࣌Ͱͷ *#.ͷඪϦετʹ͍ͭͯɺ XXXJCNDPNMFHBMDPQZUSBEFTIUNMΛ͝ཡ͍ͩ͘͞ɻ .JMWVTɺ"QBDIFϥΠηϯεͰ͞Ε͍ͯΔ-'"*%BUB'PVOEBUJPOͷΦʔϓϯιʔεϓϩδΣΫτͰ͢ɻ "QBDIFɺ"QBDIF4QBSLɺ4QBSLɺ͓Αͼ4QBSLϩΰɺ "QBDIF4PGUXBSF'PVOEBUJPOͷඪͰ͢ɻ 1BSRVFUɺถࠃ͓Αͼͦͷଞͷࠃʹ͓͚Δ"QBDIF4PGUXBSF'PVOEBUJPOͷొඪ·ͨඪͰ͢ɻ *DFCFSHɺถࠃ͓Αͼͦͷଞͷࠃʹ͓͚Δ"QBDIF4PGUXBSF'PVOEBUJPOͷొඪ·ͨඪͰ͢ɻ 03$ɺถࠃ͓Αͼͦͷଞͷࠃʹ͓͚Δ"QBDIF4PGUXBSF'PVOEBUJPOͷొඪ·ͨඪͰ͢ɻ "370ɺถࠃ͓Αͼͦͷଞͷࠃʹ͓͚Δ"QBDIF4PGUXBSF'PVOEBUJPOͷొඪ·ͨඪͰ͢ɻ &YDFMɺถࠃ.JDSPTPGU$PSQPSBUJPOͷถࠃ͓Αͼͦͷଞͷࠃʹ͓͚ΔొඪͰ͢ɻ