Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
COVID-19 に対するオープンデータの取り組み
Search
Asei Sugiyama
April 25, 2020
Technology
0
140
COVID-19 に対するオープンデータの取り組み
第44回 Machine Learning 15minutes! で登壇した際の資料です
Asei Sugiyama
April 25, 2020
Tweet
Share
More Decks by Asei Sugiyama
See All by Asei Sugiyama
MLOps の現場から
asei
8
890
LLMOps: Eval-Centric を前提としたMLOps
asei
7
640
The Rise of LLMOps
asei
13
3k
生成AIの活用パターンと継続的評価
asei
15
2.6k
最近の Citadel AI の取り組みのご紹介 (Nov, 2024)
asei
2
130
仕事で取り組む 生成 AI 時代の対話の品質評価
asei
2
87
MLOps の処方箋ができるまで
asei
3
630
LLM を現場で評価する
asei
5
1k
生成 AI の評価方法
asei
8
2.4k
Other Decks in Technology
See All in Technology
スキルだけでは満たせない、 “組織全体に”なじむオンボーディング/Onboarding that fits “throughout the organization” and cannot be satisfied by skills alone
bitkey
0
180
AWS Well-Architected Frameworkで学ぶAmazon ECSのセキュリティ対策
umekou
2
140
Pwned Labsのすゝめ
ken5scal
2
440
RayでPHPのデバッグをちょっと快適にする
muno92
PRO
0
190
システム・ML活用を広げるdbtのデータモデリング / Expanding System & ML Use with dbt Modeling
i125
1
320
Potential EM 制度を始めた理由、そして2年後にやめた理由 - EMConf JP 2025
hoyo
2
2.6k
クラウド関連のインシデントケースを収集して見えてきたもの
lhazy
7
1k
アジャイルな開発チームでテスト戦略の話は誰がする? / Who Talks About Test Strategy?
ak1210
1
590
日経のデータベース事業とElasticsearch
hinatades
PRO
0
230
AIエージェント入門
minorun365
PRO
31
18k
実は強い 非ViTな画像認識モデル
tattaka
3
1.3k
EMConf JP 2025 懇親会LT / EMConf JP 2025 social gathering
sugamasao
2
190
Featured
See All Featured
Dealing with People You Can't Stand - Big Design 2015
cassininazir
366
25k
KATA
mclloyd
29
14k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
133
33k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
Faster Mobile Websites
deanohume
306
31k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
175
52k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
251
21k
Agile that works and the tools we love
rasmusluckow
328
21k
Writing Fast Ruby
sferik
628
61k
Bash Introduction
62gerente
611
210k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
7
640
Building an army of robots
kneath
303
45k
Transcript
COVID-19 ʹؔ͢Δ ΦʔϓϯσʔλͷऔΓΈ ୈ 44 ճ Machine Learning 15minutes! 1
ࣗݾհ • ਿࢁ Ѩ • Software Engineer @ Repro AI
Labs • TensorFlow ίϯτϦϏϡʔλʔ • TFX : Issue ཱͯͨΓ PR ཱͯͨΓ • docs-l10n : ༁ & ϨϏϡʔ • ػցֶशਤؑ ڞஶ 2
ҙࣄ߲ • ͋͘·ͰݸਓతͳݟղͰ͋Γɺॴଐ͢Δ͍͔ͳΔஂମͱແؔ Ͱ͢ • σʔλαΠΤϯεͷ͋·Γ͠·ͤΜ • ػցֶशͷ͠·ͤΜ • COVID-19
ʹؔ͢Δকདྷ༧ଌͷ͠·ͤΜ • COVID-19 ͷײછ༧ͷ͠·ͤΜ 3
ຊͷ༰ 1.Open Data ͱ <- 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 4
Open Data ͱ • “Open data and content can be
freely used, modified, and shared by anyone for any purpose” from The Open Definition • ϚγϯϦʔμϒϧͰ͋Δ͜ͱॏཁࢹ • Data.gov : ΞϝϦΧͷΦʔϓϯσʔ λͷαΠτ (ӈਤ) • Data Portals : 588 ͷΦʔϓϯ σʔλͷΧλϩά 5
ຊͷ Open Data • ࣏ࣗମ͕ؤு͍ͬͯΔ • data.go.jp • σʔλγςΟḉߐϙʔλϧαΠτ •
͍͢͝ (ޙड़) • ౦ژΦʔϓϯσʔλΧλϩάαΠτ ϗʔϜϖʔδ 6
ΦʔϓϯσʔλΛ͡ΊΑ͏1 • ಠཱߦ๏ਓɺ࣏ࣗମͳͲ͕อ ༗͢Δެڞσʔλ͕ɺࠃຽاۀͳͲ ͷར׆༻͞Ε͍͢Α͏ʹػձಡʹ దͨ͠ܗͰɺೋ࣍ར༻Մೳͳϧʔϧͷ ͱͰެ։͞ΕΔ͜ͱɺ·ͨɺͦͷΑ ͏ʹެ։͞ΕͨσʔλΛࢦ͠·͢ 1 http://www.kantei.go.jp/jp/singi/it2/densi/kettei/
opendata_tebikisyo.pdf 7
σʔλγςΟḉߐϙʔ λϧαΠτ • ͞·͟·ͳσʔλΛ PDF Ͱͳ͘ CSV, XML, RDF, Linked
RDF Ͱެ ։͍ͯ͠Δ • ϥΠηϯε CC BY • ྉཧϨγϐ (XML) 8
9
͑͞࢈ࡊͷྉཧϨγϐ (ൈਮ) ݟ͢͞ͷͨΊɺ࠷ޙͷߦʹ͚ͩվߦΛՃ͑ͨ <http://linkdata.org/resource/rdf1s8262i#2> <http://www.w3.org/2000/01/rdf-schema#label> "2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%96%99%E7%90%86%E5%90%8D> "΄͏ΕΜͱ͠ͷφϜϧ"@ja ;
<http://linkdata.org/property/rdf1s8262i#%E4%BA%BA%E6%95%B0> "4ਓ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%991> "͠ 170gʢ2/3ାʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%92> "΄͏ΕΜ 130gʢ2/3ଋʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%93> "͕ܲΒεʔϓͷૉ খ͞͡2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%94> "͝·༉ খ̍͞͡"@ja ; <http://linkdata.org/property/rdf1s8262i#%E8%A9%B3%E7%B4%B0URL> <https://www.city.sabae.fukui.jp/kenko_fukushi/hoken_kenkozukuri/mugenyasai.files/receipi.pdf> . 10
͑͞࢈ࡊͷྉཧϨγϐ • http://linkdata.org/work/ rdf1s8262i • ߹ܭμϯϩʔυ 4 ճ (2020-04-23 ࣌)
• ࠷ऴߋ৽ : 2020/03/17 • Text, Excel, RDF ܗࣜ 11
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ <-
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 12
COVID19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ ٸʹσʔλެ։ɾ׆༻ͷಈ͖͕͕͍ͬͯΔɻ • ౦ژ ৽ܕίϩφΠϧεײછରࡦαΠτ •
৽ܕίϩφΠϧεରࡦμογϡϘʔυ 13
౦ژ ৽ܕίϩφ ΠϧεײછରࡦαΠ τ • ౦ژΦʔϓϯσʔλΧλϩάαΠτͷ σʔλ͔Β࡞ • αΠτࣗମ MIT
ϥΠηϯε • Code for Japan ͷ׆ಈͷ 1 ͭ 14
15
StopCovid19 શࠃ൛ • ౦ژͷΦʔϓϯιʔεΛར༻ͨ͠αΠ τͷ·ͱΊαΠτ • ͜ͷαΠτࣗମ MIT ϥΠηϯε •
codeforjapan/stopcovid19 16
৽ܕίϩφΠϧεର ࡦμογϡϘʔυ • ହհ (@taisukef) ࢯ • COVID-19 ͷױऀ͕ར༻Մೳͳපচ ʹணͨ͠αΠτ
• ްੜ࿑ಇলఏڙͷ৽ܕίϩφΠϧε ཅੑױऀ PDF σʔλΛ JSON-API Խͨ݁͠ՌΛར༻ • ιʔεCC BYϥΠηϯεͰఏڙ͞Εͯ ͍Δ 17
ಓݝผ৽ܕίϩφΠϧεײછऀϚοϓ • δϟοάδϟύϯגࣜձࣾ • σʔλ CC-BY-NC 4.0 • ༷ʑͳσʔλιʔε͔Βूܭ͍ͯ͠Δ ༷
(ෳਓʹΑΔ࡞ۀ) • ՄࢹԽ ArcGIS (ESRI) 18
தͷਓͷ • https://twitter.com/ oohamazaki/status/ 1253306592595832835?s=20 19
SIGNATE COVID-19 νϟϨϯδ • ϑΣʔζ 1. σʔληοτͷߏங • ϑΣʔζ 2.
σʔλੳ • ϑΣʔζ 3. ጶױऀ༧ଌ 20
21
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ 3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔
<- 22
ཁࢫ • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 23
ݸਓతͳ҆৺ • COVID-19 ʹؔ͢Δ AI ສೳ͕ग़ͯ ͍ͳ͍͜ͱ • ༧ଌϞσϧʹΑΔ༬ݴऀ͕࣍ʑʹݱΕ Δঢ়گͰͳ͍ͷෆதͷ͍
• σʔληοτͷඋͱ͍͏ͬͱॏ ཁͳՕॴʹϦιʔεׂ͕͔Ε͍ͯΔ 24
ػցֶशʹཱͭͷ͔ʁ • ػցֶश·Ͱͷεςοϓʹ͓͍ͯɺݱࡏۀͷఆٛͷஈ֊ 1.ۀ͕ະఆٛ 2.ۀ͕ఆٛ͞ΕɺखॱॻΛ࡞Δ 3.खॱ͕໌֬ʹͳΓɺγεςϜԽΛߦ͏ <- ࠓ͜ͷ͋ͨΓ 4.ใΛՄࢹԽ͠ɺҙࢥܾఆΛߦ͏ <-
ઐՈ͜͜ 5.ҙࢥܾఆͷࣗಈԽ or ิॿ <- ػցֶश͜͜ 25
σʔλαΠΤϯςΟετʹཱͭͷ͔ʁ • σʔλͷ׆༻ʹඞཁͳεΩϧͷ • σʔλαΠΤϯε • ΤϯδχΞϦϯά • υϝΠϯࣝ •
ҰൠͷσʔλαΠΤϯςΟετɾΤϯδχΞҩֶެऺӴੜ ͷ͕ࣝඞͣ͠๛ͱ͍͏Θ͚Ͱͳ͍ 26
ࣗʹԿ͕Ͱ͖ΔͷͩΖ͏͔ʁ • COVID-19 ͷײછͷ֦େঢ়گʹ͍ͭͯूΊΒΕͨσʔλɺඇ ઐՈͷखʹ༨Δ • Titanic ͷσʔλ͔ΒɺզʑԿ͔༗༻ͳݟΛಘΒΕͨͩ Ζ͏͔ʁ •
υϝΠϯࣝΛൈ͖ʹɺཧϞσϧػցֶशϞσϧΛ༻͍ͯ কདྷ༧ଌΛͨ͠ͱ͜ΖͰɺͦͷ݁ՌԿ͔ҙຯ͕͋ΔͩΖ͏ ͔ʁ 27
Amazon (AWS) ͷύ ϒϦοΫσʔλϨΠΫ • σʔλʹΞΫηε͘͢͠ͳͬͨ • ϚΫϩͳҙࢥܾఆ͔֬ʹͰ͖Δ͔ ͠Εͳ͍ •
զʑ͜ΕΛݟͯԿΛ͢Ε͍͍Μͩ Ζ͏͔ʁ 28
See how your community is moving around differently due to
COVID-192 • Google ͷϨϙʔτ • Transit stations Workplace ΛݮΒͤྑͦ͞͏ͳײ͕͢͡Δ • ײછऀΑΓམͪண͍ͯݟΒΕΔ 2 Google LLC "Google COVID-19 Community Mobility Reports." https://www.google.com/covid19/mobility/ Accessed: 2020-04-24. 29
զʑ͕ݟΔ͖ࢦඪ ͳʹ͔ʁ • ࣍ʹΔ͜ͱ͕ݟ͑ΔࢦඪΛݟ͍ͨ • ͜ΕͲͷۀʹண͖͔͢ͱ͍͏ ʹಉ͡ • ͍߹Θͤۀʹண͢Δ͜ͱΛఏҊ ͍ͨ͠
• ౦ژ ৽ܕίϩφίʔϧηϯλʔ૬ஊ ݅ͷྦྷܭ͕ઢܗʹ͔͠৳ͼ͍ͯͳ͍ 30
31
࣍ʹඋ͖͢σʔλͳʹ͔ʁ • ඞཁͳͷ͍߹Θͤͱͦͷճ • ༷ʑͳରࡦ͕ଧͨΕ͍ͯΔҰํɺ૭ޱͷΞΫηε໌֬Ͱͳ ͍ (ཧతʹॴʹߦ͚ͳ͍ʂ) ͷͰ͜͏͍ͬͨ૭ޱʹؔͳ ͍͍߹Θ͕ͤࡴ౸͍ͯ͠Δ͜ͱ͕༧͞ΕΔ •
Q&A σʔλΛ༻͍ͨݕࡧΤϯδϯ໌Β͔ʹ༗ޮ • Q&A σʔλͱγφϦΦΛݩʹͨ͠νϟοτϘοτ༗ޮ 32
33
https://corona.go.jp/ ʹઃஔࡁ 34
ఆ͞ΕΔ՝ • ηϯγςΟϒͳ࣭͕૬ྔدͤΒΕ Δ͜ͱ͕ఆ͞Εɺੜσʔλͷอ Ͱ͖ͳ͍ • ঢ়گ͕·͙Δ͘͠มԽ͢Δ݁Ռɺಉ ࣭͡ʹରͯ͠దͳճ͕ৗʹม ΘΓଓ͚ΔͨΊɺσʔληοτͷߋ৽ ͕ඞཁ
• લऀͱ͔͘ޙऀʹ͍ͭͯࢢຽͰ Ͱ͖Δ͜ͱ͕͋ΔͷͰ 35
ͳͥզʑϚεΫΛٻ Ίͯ͠·͏ͷ͔ • ڴҖʹରͯ͠Ͱ͖Δ͜ͱ͕ͳʹͳ͍ ͱ͍͏ετϨε͔ΒճආͰ͖Δ • ϚεΫങ͍ٻΊΔ͜ͱ͕Ͱ͖Δͷ Ͱɺڻҟʹରͯ͠औΕΔΞΫγϣϯʹ ͳ͍ͬͯΔ http://www.osaka-kyoiku.ac.jp/
~toyosawa/klecture09.pdf 36
σʔληοτͷඋࢢຽ͕ߦ͑ΔΞΫγϣϯ • ඇઐՈͰࢀՃͰ͖Δ • ࡞Δ͜ͱΑΓอक͢Δ͜ͱʹଟେͳख͕͔͔ؒΔ (ϦϯΫ Εσʔλͷܗࣜมߋͷରॲͱ͔) • σʔληοτ͕͋ΕΤϯδχΞͷྗͰιϑτΣΞʹͰ͖Δ •
ιϑτΣΞʹͰ͖Ε֦ࢄͰ͖Δ • SIGNATE ͷऔΓΈ͋Δҙຯཧత 37
Recap • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 38