Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
強化学習の実業務への応用について
Search
kitamuaratomokazu
February 16, 2019
Technology
0
810
強化学習の実業務への応用について
kitamuaratomokazu
February 16, 2019
Tweet
Share
More Decks by kitamuaratomokazu
See All by kitamuaratomokazu
Calling Julia from Python (Julia Time)
kitamuratomokazu
0
96
Calling Julia from Python
kitamuratomokazu
2
750
Other Decks in Technology
See All in Technology
Skrub: machine-learning with dataframes
gaelvaroquaux
0
110
モダンフロントエンド 開発研修
recruitengineers
PRO
10
6.3k
PRDの正しい使い方 ~AI時代にも効く思考・対話・成長ツールとして~
techtekt
PRO
0
1.3k
バッチ処理で悩むバックエンドエンジニアに捧げるAWS Glue入門
diggymo
3
110
Webアクセシビリティ入門
recruitengineers
PRO
3
1.5k
異業種出身エンジニアが気づいた、転向して十数年経っても変わらない自分の武器とは
macnekoayu
0
270
Nstockの一人目エンジニアが 3年間かけて向き合ってきた セキュリティのこととこれから〜あれから半年〜
yo41sawada
0
190
生成AI時代に必要な価値ある意思決定を育てる「開発プロセス定義」を用いた中期戦略
kakehashi
PRO
1
260
Obsidian応用活用術
onikun94
0
290
モバイルアプリ研修
recruitengineers
PRO
5
1.7k
なぜスクラムはこうなったのか?歴史が教えてくれたこと/Shall we explore the roots of Scrum
sanogemaru
1
560
フィンテック養成勉強会#56
finengine
0
110
Featured
See All Featured
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
Documentation Writing (for coders)
carmenintech
73
5k
Balancing Empowerment & Direction
lara
3
610
For a Future-Friendly Web
brad_frost
179
9.9k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.8k
Building Better People: How to give real-time feedback that sticks.
wjessup
368
19k
GraphQLとの向き合い方2022年版
quramy
49
14k
Mobile First: as difficult as doing things right
swwweet
224
9.9k
What’s in a name? Adding method to the madness
productmarketing
PRO
23
3.6k
The Power of CSS Pseudo Elements
geoffreycrofte
77
5.9k
Optimizing for Happiness
mojombo
379
70k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4k
Transcript
ڧԽֶशͷ࣮ۀͷԠ༻ʹ͍ͭͯ .BUI$PEJOHڧԽֶशΛޠΖ͏ʂ גࣜձࣾεΫϥϜαΠϯɹදऔకɹଜ༑ LJUBNVSB!TDSVNTJHODPN 5JUMF
ଜɹ༑ ࣄɿגࣜձࣾεΫϥϜαΠϯɹ ɹɹػցֶशΞϓϦέʔγϣϯͷઃܭ։ൃ ɹɹσʔλੳνʔϜͷ্ཱͪ͛ࢧԉ ɹɹڧԽֶशͱ֬ϓϩάϥϛϯάʹؔ৺ɻੵۃతʹࣄྫΛ࡞͍ͬͯ·͢ɻ झຯίϛϡχςΟӡӦ .BUI$PEJOHओ࠵ ɹɹߨࢣ͕ڭ͑ΔͷͰͳ͘ɺࢀՃऀಉ͕࢜ޓ͍ʹࣝͱܙΛ࣋ͪدΓ ɹɹڭֶ͍͑͋Ϳʹָ͠͞Λײ͍ͯ͡·͢ɻ
ࣗݾհ
ʢήʔϜͷੈքͰͳ͘ʣ ڧԽֶशΛ࣮ۀͰԠ༻͍ͯͨ͘͠Ίʹ 5PEBZ`T.BJO5IFNF
ֶशϓϩηε ɹ୳ࡧͱར༻ ɹɹࢼߦࡨޡ͠ͳ͕ΒֶͿ͜ͱ͕Ͱ͖Δ͔ʁ Ϛϧίϑܾఆաఔ ɹݱ࣌ͷใ͔Β࣍ͷܾఆΛԼ͢͜ͱ͕Ͱ͖Δ͔ ɹͦͷܾఆʹΑΓ֬తʹ࣍ͷঢ়ଶભҠ͢Δ͔ʁ ڧԽֶशʹ͍͍ͯΔઃఆͷ֬ೝ
ࠓճҩྍؔͷΫϥΠΞϯτΑΓࣄྫఏڙͷڐՄΛ͍͖ͨͩ·ͨ͠ɻ ʢຊࢿྉͷσʔλͯ͢μϛʔͰ͋Γ࣮ࡍͷσʔλͰ͋Γ·ͤΜɻʣ ԼهͷέʔεΛఆͯ͠ڧԽֶशͰղ͍ͯΈ·ͨ͠ɻ ຖඦ໊ͷױऀ͕དྷӃ͠ελοϑʢޢࢣʣ͕࠾݂͍ͯ͠·͢ɻ ױऀʹΑͬͯ࠾݂͍͢͠ਓͱͦ͏Ͱͳ͍ਓ͕͍Δ͜ͱɻ ελοϑਓʹΑͬͯϕςϥϯ͔Β৽ਓ·Ͱٕྔʹ͕ࠩ͋Γ·͢ɻ Ұఆͷׂ߹Ͱɺ࠾݂ʹࣦഊ͠·͢ɻ ࣄྫɿපӃͷ࠾݂
࠾݂ͷࣦഊΛԼ͛ͯױऀͷຬΛ্͍͛ͨɻ ελοϑͷٕྔͷ্ΛਤΓ͍ͨɻ ղ͖͍ͨ՝
૬͢ΔཁٻΛຬͨ͢࠷దͳߦಈબΛڧԽֶशͰֶͿ͜ͱ͕Մೳ ͔ʁ ࣦഊΛԼ͛Δ ɹϕςϥϯελοϑ͕ରԠ͢Δ ٕೳͷ্ΛਤΔ ɹࣗͷٕྔΑΓগ͍͠͠ױऀʹτϥΠ͢Δ ɹࣦഊ͕͕͋Δ (PBMͷઃܭ
ελοϑ͕దͳқͷױऀΛ୲Ͱ͖Δ͜ͱ ߦಈΛ֤ελοϑ͝ͱʹ5SZ͔1BTT͔Λબͤͯͪ͞ߦ ྻͷঢ়گ͓Αͼελοϑͷۭ͖ঢ়گͱࣗͷྗྔʹԠͨ͡5SZ ͱ1BTTΛબͰ͖ΔΑ͏ʹֶश͍ͨ͠ɻ ݱঢ়Ϛωʔδϟʔ͕ܦݧͱצͰߦ͍ͬͯΔΑ͏Ͱ͢ɻ (PBMͷઃܭ
1P$ ֓೦ݕূ ػցֶश͕Ծʹ͏·͘ਐΉͱɺ ৽ਓࣗͷྗྔʹ͋ͬͨױऀΛબผɹࣦഊԼ͕Δ ϕςϥϯελοϑɹқ͕ߴ͍ױऀΛબผࣦഊ্͕Δ ͣʂ (PBMͷઃܭ
ױऀқελοϑٕྔ ਪఆ ֬Ϟσϧ ױऀͱελοϑ Ϛονϯά ҰͭͷϞσϧͰҰʹղ͘ͷ͍͠ͷͰ Λׂ͠·ͨ͠ ڧԽֶश ਪఆͨ͠Λಛྔ ใुͱͯ͠ར༻͢Δ
֬ϞσϧͱڧԽֶशΛ߹Θͤͯղ͍͍ͯ͘ ϞσϦϯάͷํ
ίϛϡχςΟϝϯόʔͱͷσΟεΧογϣϯ ॳ࿈ଓ࣌ؒͷ.%1Λߟ͍͑ͯ ͨɻ3FXBSEױऀͷͪ࣌ؒΛ ϖφϧςΟͱͯ͠༩͑ΔํࣜΛݕ ౼్͍͕ͯͨ͠தͰํసɻ ࢄ࣌ؒͷߦಈͱͯ͠ใु ٕྔɿTLJMMͱױऀࠔɿ EJGpDVMUZͰදݱ
࣮ɿϞσϦϯά ωοτϫʔΫ ɹ%2/ ӅΕʢೖྗ࣍ݩͱಉ͡GVMMDPOOFDUFESFMVʣɹग़ྗ࣍ݩɹMJOFBS ಛྔ ױऀࠔɿ࿈ଓ ελοϑٕྔ࿈ଓ
ελοϑͷۭ͖༧ఆ࣌ؒ࿈ଓ ରԠελοϑPOFIPU ߦಈ ɹUSZQBTT࣍ݩ ใु ޭEJGpDVMUZTLJMM ׂɹௐͣΈ ࣦഊTLJMMEJGpDVMUZ ׂ̌ɹௐͣΈ ͪ࣌ؒͳ͠ͷQBTT ͪ࣌ؒ͋ΓͷQBTTTLJMMEJGpDVMUZ ʢͪ࣌ؒ ͪ࣌ؒͷ࠷େ ؔۙࣅͰɺॳχϡʔϥϧωοτͰͳ͍ͷΛ࣮͠Α͏ͱ͕ͨ͠χϡʔϥϧωοτͷํָ͕ʹ࣮Ͱ͖ΔͷͰ ࣌ؒͷؔͰ%2/Ͱ࣮͢Δɻ
ֶशͷਪҠϥϯμϜʹߦಈબ
ֶशͷਪҠϥϯμϜʹߦಈબ
ֶशͷਪҠ%2/ͰͲ͏͔ʁ
ֶशͷਪҠ%2/ ֶशͷ݁Ռɹϕςϥϯʹ1BTT͢Δ͜ͱΛ֮͑ͨɻ
ϞσϦϯάͷݟ͠ ωοτϫʔΫ ɹ%2/ ೖྗ̍̎࣍ݩɹӅΕʢ࣍ݩGVMMDPOOFDUFESFMVʣɹग़ྗ࣍ݩɹMJOFBS MPTTGVODUJPONTF PQUJNJ[FS"EBN ɹMFBSOJOHSBUF ಛྔ ױऀࠔɿ࿈ଓ
ελοϑٕྔ࿈ଓ ελοϑͷۭ͖ঢ়گPOFIPU ରԠελοϑPOFIPU ߦಈ ɹUSZQBTTͷೋ ใु ޭ ࣦഊ ͪ࣌ؒͳ͠ͷQBTT ͪ࣌ؒ͋ΓͷQBTT ɹTUFQޙ·ͰΛߟྀͨ͠ใुͰֶश ʣใुؔͱಛϕΫτϧΛݟͨ͠ΓMFBSOJOHSBUFΛখͨ͘͞͠Γͨ͠ɻ
ֶशͷਪҠ%2/Ϟσϧͱใुؔݟ͠
ֶशͷਪҠ%2/Ϟσϧͱใुؔݟ͠ ࣗͷ࣮ྗʹԠͨ͡ױऀΛબΜͰ5SZ͢ΔΑ͏ʹͳͬͨɻ ͔͜͜Β͞ΒʹϒϥογϡΞοϓ͍͖ͯ͠·͢ɻ
ڧԽֶशͷָ͠͞ ͏·͍͔͘ͳ͍࣌ɺ"HFOUͷؾ࣋ͪΛߟ͑ͨΓ͢Δɻ ใुʹΑͬͯڍಈ͕͝Ζͬͱ͔ΘΔ ڧԽֶशʹ͍ͭͯͷจ͕ʑ͍͍͢͝Ͱൃද͞Ε͍ͯΔɻ ใुؔઃܭγϡϛϨʔλ࡞ɺֶशϞσϧͳͲߟ͑Δ͜ ͱ͕ଟ͘ΫϥΠΞϯτνʔϜϝϯόʔͱͷΓͱΓͳͲɺ େม͕ͩઃܭϓϩηεָ͕͍͠ɻ
͍֓͠೦ٕज़ɺγϯϓϧͳྫͰ֬ೝͨ͠Γϝϯόʔ͕ର͢Δ͜ͱͰຊ࣭తͳཧղ ΛಘΒΕΔͱߟ͑·͢ɻຊάϧʔϓɺͦͷΑ͏ͳ͜ͱ͕Ͱ͖ΔΑ͏ͳίϛϡχςΟͱͳ Δ͜ͱΛࢦͯ͠ӡӦ͍ͯ͠·͢ɻڵຯ͕͋Δํͥͻ͝ࢀՃ͍ͩ͘͞ɻ IUUQTNBUIDPEJOHDPOOQBTTDPN .BUI$PEJOHͷհ
͝੩ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ɻ -BTU