Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
LLM Science Examにおけるデータ戦略まとめ
Search
someya takashi
November 08, 2023
Programming
1
670
LLM Science Examにおけるデータ戦略まとめ
第4回 Data-Centric AI勉強会 -コンペLT大会- 発表資料
someya takashi
November 08, 2023
Tweet
Share
Other Decks in Programming
See All in Programming
品質ワークショップをやってみた
nealle
0
260
Things You Thought You Didn’t Need To Care About That Have a Big Impact On Your Job
hollycummins
0
230
Go言語の特性を活かした公式MCP SDKの設計
hond0413
1
230
『毎日の移動』を支えるGoバックエンド内製開発
yutautsugi
2
250
コードとあなたと私の距離 / The Distance Between Code, You, and I
hiro_y
0
170
はじめてのDSPy - 言語モデルを『プロンプト』ではなく『プログラミング』するための仕組み
masahiro_nishimi
2
480
明日から始めるリファクタリング
ryounasso
0
140
登壇は dynamic! な営みである / speech is dynamic
da1chi
0
340
なぜGoのジェネリクスはこの形なのか? Featherweight Goが明かす設計の核心
ryotaros
7
1.1k
非同期jobをtransaction内で 呼ぶなよ!絶対に呼ぶなよ!
alstrocrack
0
930
All About Angular's New Signal Forms
manfredsteyer
PRO
0
160
他言語経験者が Golangci-lint を最初のコーディングメンターにした話 / How Golangci-lint Became My First Coding Mentor: A Story from a Polyglot Programmer
uma31
0
150
Featured
See All Featured
Making Projects Easy
brettharned
120
6.4k
Building a Modern Day E-commerce SEO Strategy
aleyda
44
7.8k
It's Worth the Effort
3n
187
28k
Automating Front-end Workflow
addyosmani
1371
200k
The Illustrated Children's Guide to Kubernetes
chrisshort
49
51k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
333
22k
The Language of Interfaces
destraynor
162
25k
Why You Should Never Use an ORM
jnunemaker
PRO
59
9.6k
4 Signs Your Business is Dying
shpigford
185
22k
The Power of CSS Pseudo Elements
geoffreycrofte
79
6k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
35
6.1k
Raft: Consensus for Rubyists
vanstee
140
7.1k
Transcript
--.4DJFODF&YBNʹ͓͚Δσʔλઓུ·ͱΊ ୈճ%BUB$FOUSJD"*ษڧձίϯϖ-5େձ ݄ 5BLBTIJ4PNFZB
ࣗݾհ ໊લɿTPNFZB ܦྺɿϙευΫʢੑཧֶʣˠ"*ΤϯδχΞ ࣄɿը૾ೝࣝɺσʔληϯτϦοΫ"* ,BHHMFɿ$7 /-1 ԻͳͲษڧతͰࢀՃ ຊ͢ίϯϖ
--.4DJFODF&YBN֓ཁ ։࠵ظؒɿ ࢀՃνʔϜɿUFBNT ධՁࢦඪɿ.FBO"WFSBHF1SFDJTJPO! ੍ɿ(16ϝϞϦ(# ఏग़࣌ؒ࣌ؒ ओ࠵ɿ,BHHMF 2VFTUJPO 8IBUJTUIFEFDBZFOFSHZGPS
UIFGSFFOFVUSPOEFDBZ QSPDFTT ʢࣗ༝தੑࢠ่յաఔͷ่յΤωϧ Ϊʔʁʣ 0QUJPO " .F7 # .F7 $ .F7 % .F7 & .F7 "OTXFS& (15 ՊֶతͳτϐοΫͷจষ XJLJQFEJBจষΛQSPNQUʹ ࣭ɾબࢶɾղΛੜ ྫ ίϯϖͷλεΫ Պֶʹؔ࿈͢ΔଟબࢶΛղ͘ IUUQTXXXLBHHMFDPNDPNQFUJUJPOTLBHHMFMMNTDJFODFFYBN
Ξϓϩʔν ίϯϖॳظɿੜσʔλͰͷֶश ίϯϖத൫Ҏ߱ɿ3"(ʢ3FUSJFWBM"VHNFOUFE(FOFSBUJPOʣΞϓϩʔν (15 ੜσʔλ dL Ϟσϧ EFCFSUB --.ͳͲͷ༷ʑͳϞσϧΛࢼ͕͢ είΞ͕ఔͰ಄ଧͪʹͳΔ
ˣ ϞσϧֶशʹΑͬͯXJLJQFEJBશͯͷՊֶ ࣝΛ֫ಘ͢ΔͷෆՄೳʁ ֶश ྨࣅจষݕࡧ DPOUFYU 2VFTUJPO 0QUJPO *OQVUDPOUFYU 4ZTUFN"OTXFSUIFGPMMPXJOH NVMUJQMFDIPJDFRVFTUJPOCZʢলུʣ 2VFTUJPORVFTUJPO " PQUJPO" # PQUJPO# $ PQUJPO$ % PQUJPO% & PQUJPO& "OTXFS 1SPNQU5FNQMBUF Ϟσϧ ਪ " είΞdୡ wσʔλͷ࣭ wݕࡧਫ਼ ͕ॏཁ .PEFM$FOUSJD %BUB$FOUSJD ΫΤϦ σʔλιʔε
ίϯϖιϦϡʔγϣϯུ֓ ΤϯδχΞϦϯά σʔλ wXJLJQFEJBUFYUEVNQ wֶशɾධՁ༻σʔλੜ wσʔλΫϨϯδϯά wΫϥελϦϯά ݕࡧ wจষຒΊࠐΈ
TFOUFODFUSBOTGPSNFS UGJEG #. wۙ୳ࡧ Ϟσϧ w&ODPEFSNPEFM EFCFSUBWMBSHF w%FDPEFSNPEFM # # # ςΩετલॲཧ 0QFO"*"1* GBJTT FMBTUJDTFBSDI ϝϞϦཧ -MBNB .JTUSBM -P3"2-P3" େنϞσϧͷਪ ຊ͢෦
ݕࡧઓུ ެ։OPUFCPPLʢϕʔεϥΠϯʣɿXJLJQFEJBͷهࣄ୯ҐͰݕࡧˠީิهࣄΛηϯςϯε୯ҐͰׂͯ͠࠶ݕࡧ ສهࣄ TFOUFODF USBOTGPSNFS ϕΫτϧԽ ςετσʔλ 2VFTUJPO 0QUJPO ʴ
ϕΫτϧ%# ΫΤϦ 8IBUJTUIFEFDBZFOFSHZGPSUIFGSFFOFVUSPOEFDBZQSPDFTT .F7.F7 .F7.F7.F7 ީิهࣄ ʢ5PQ݅ʣ CMJOH fi SF ϥΠϒϥϦ ηϯςϯεׂ ۙ୳ࡧ TFOUFODF USBOTGPSNFS ϕΫτϧԽ ϕΫτϧԽ ۙ୳ࡧ ݕࡧ݁Ռͷηϯςϯε ʢ5PQ݅ʣ 'PSUIFGSFFOFVUSPO UIFEFDBZFOFSHZGPSUIJT QSPDFTT CBTFEPOUIFSFTUNBTTFTPGUIF OFVUSPO QSPUPOBOEFMFDUSPO JT.F7 ΫΤϦ ϕΫτϧ%#
ݕࡧͷ จষͷϕΫτϧԽख๏ w 4FOUFODF5SBOTGPSNFS .5&#-FBEFSCPSEʢ4FOUFODF5SBOTGPSNFSͷ-FBSEFSCPBEʣ͔Β༷ʑͳϞσϧΛࢼͯ͠είΞ্͕͕ΔͷΛબఆ ྫɿHUFTNBMMCBTF CHFTNBMMCBTF w
5'*%' 4FOUFODF5SBOTGPSNFS͚ͩͰͳ͘ɺ5'*%'#.ͳͲ/-1ͷैདྷख๏༗ޮͩͬͨ ʢઐ༻ޠͳͲಛఆͷهࣄͰ͔͠ΘΕͳ͍୯ޠ͕ଟ͍ʁʣ จষׂ w จͷ۠Γ ύϥάϥϑ୯ҐɺηϯςϯεʢҰจʣ୯Ґɺ·ͨͦͷதؒͷෳจΛ·ͱΊͨ୯ҐͳͲɺνʔϜΑ༷ͬͯʑ 3FSBOLFS w ީิจষͷத͔ΒΑΓؔ࿈͕ߴ͍จষ্͕ҐʹͳΔΑ͏ฒͼସ͑
3FUSJFWFS3FSBOLFSΞʔΩςΫνϟ IUUQTXXXQJOFDPOFJPMFBSOTFSJFTSBHSFSBOLFST ΑΓਤΛҾ༻ 3FUSJFWFSTFOUFODFUSBOTGPSNFS 3FUSJFWFSSFDBMMॏࢹ ˣ 3FSBOLFSQSFDJTJPOॏࢹ 3FSBOLFS#&35 %FCFSUB 5XP4UBHF3FUSJFWBM
OE SE UIͷνʔϜ͕༻ ݕࡧͷ
σʔλઓུ 8JLJQFEJBจষͷલॲཧ w ɺࣜͷదͳύʔε ͘༻͍ΒΕ͍ͯΔXJLJQFEJBQBSTFS XJLJFYUSBDUPSͳͲ Պֶܥͷهࣄʹଟ͍දݱࣜΛదʹύʔεͰ͖ͳ͍ ্ҐνʔϜ͜ͷ͜ͱ͕ݕࡧੑೳɺϞσϧͷਪੑೳΛ੍ݶ͍ͯ͠Δ͜ͱʹؾ͖ͮɺಠࣗͷલॲཧΛΈࠐΜͩΦϦδφϧ
σʔληοτΛ࡞͍ͯͨ͠ ΫϥελϦϯά 8JLJQFEJBͷશମͰͳ͘ՊֶܥͷهࣄͰΫϥελϦϯάͨ͠αϒηοτΛ༻͍Δ 1SPT ՊֶܥҎ֎ͷؔ࿈ͷͳ͍هࣄΛ͋Β͔͡Ίআ֎Ͱ͖Δɺݕࡧର͕গͳ͍ͷͰݕࡧϓϩηε͕ߴԽ͢Δ $POT ςετσʔλʹؔ࿈͢ΔจষΛͯ͢ΧόʔͰ͖͍ͯͳ͍Մೳੑ͕͋Δ {{val|0.782343|u=MeV}} -VBεΫϦϓτͰຒΊࠐ·Εͨ ΛదʹલॲཧͰ͖ͳ͍
·ͱΊ w ϞσϧͷਪύϑΥʔϚϯε্ʹೖྗ͢Δσʔλͷ࣭͕େ σʔλࣗମͷ࣭վળͱؔ࿈͢ΔจষΛਫ਼ྑ͘ݕࡧ͢Δ͜ͱ্͕ҐೖͷϙΠϯτͩͬͨ w ্ҐͷνʔϜ΄ͲΤϥʔੳΛపఈ͍ͯ͠Δɻެ։σʔληοτͷ՝Λݟ͚ͭಠࣗͷΫϦʔ χϯάख๏Λ༻͍ΔͳͲ࣭ͷߴ͍σʔληοτ࡞ʹ࣌ؒΛ͔͚͍ͯͨ ʢࢀߟʣ
,BHHMF--.4DJFODF&YBNEJTDVTTJPO LBHHMF--.ίϯϖɹ্Ґղ๏·ͱΊ ,BHHMFίϯϖʢ--.4DJFODF&YBNʣͷৼΓฦΓͱ্Ґղ๏·ͱΊ ʢ༨ஊʣॳ--.Λ܇࿅͢ΔͨΊʹܭࢉϦιʔε͕ඞཁͳίϯϖ͔ͱࢥ͕ͬͨɺ%FCFSUBͷΑ͏ͳʢ--.ͱൺʣ ൺֱతখ͍͞ϞσϧͷΈͰۚϝμϧΛ֫ಘ͍ͯ͠ΔνʔϜଟ͔ͬͨˠ%BUB$FOUSJDͳΞϓϩʔν͕ޮ͘ίϯϖͩͬͨ