Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
COVID-19 に対するオープンデータの取り組み
Search
Asei Sugiyama
April 25, 2020
Technology
0
140
COVID-19 に対するオープンデータの取り組み
第44回 Machine Learning 15minutes! で登壇した際の資料です
Asei Sugiyama
April 25, 2020
Tweet
Share
More Decks by Asei Sugiyama
See All by Asei Sugiyama
MLOps の現場から
asei
8
890
LLMOps: Eval-Centric を前提としたMLOps
asei
7
660
The Rise of LLMOps
asei
13
3k
生成AIの活用パターンと継続的評価
asei
15
2.6k
最近の Citadel AI の取り組みのご紹介 (Nov, 2024)
asei
2
130
仕事で取り組む 生成 AI 時代の対話の品質評価
asei
2
88
MLOps の処方箋ができるまで
asei
3
640
LLM を現場で評価する
asei
5
1k
生成 AI の評価方法
asei
8
2.4k
Other Decks in Technology
See All in Technology
わたしがEMとして入社した「最初の100日」の過ごし方 / EMConfJp2025
daiksy
14
5.3k
技術スタックだけじゃない、業務ドメイン知識のオンボーディングも同じくらいの量が必要な話
niftycorp
PRO
0
120
"TEAM"を導入したら最高のエンジニア"Team"を実現できた / Deploying "TEAM" and Building the Best Engineering "Team"
yuj1osm
1
230
あなたが人生で成功するための5つの普遍的法則 #jawsug #jawsdays2025 / 20250301 HEROZ
yoshidashingo
2
320
プルリクエストレビューを終わらせるためのチーム体制 / The Team for Completing Pull Request Reviews
nekonenene
1
210
急成長する企業で作った、エンジニアが輝ける制度/ 20250227 Rinto Ikenoue
shift_evolve
0
180
Amazon Aurora のバージョンアップ手法について
smt7174
2
180
AIエージェント元年@日本生成AIユーザ会
shukob
1
240
20250304_赤煉瓦倉庫_DeepSeek_Deep_Dive
hiouchiy
2
110
2025/3/1 公共交通オープンデータデイ2025
morohoshi
0
100
【内製開発Summit 2025】イオンスマートテクノロジーの内製化組織の作り方/In-house-development-summit-AST
aeonpeople
2
1.1k
【5分でわかる】セーフィー エンジニア向け会社紹介
safie_recruit
0
19k
Featured
See All Featured
Building an army of robots
kneath
303
45k
Become a Pro
speakerdeck
PRO
26
5.2k
Site-Speed That Sticks
csswizardry
4
410
The Cost Of JavaScript in 2023
addyosmani
47
7.4k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
227
22k
Code Reviewing Like a Champion
maltzj
521
39k
How to train your dragon (web standard)
notwaldorf
91
5.9k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
114
51k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
49
2.3k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
10
520
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
11
1.3k
BBQ
matthewcrist
87
9.5k
Transcript
COVID-19 ʹؔ͢Δ ΦʔϓϯσʔλͷऔΓΈ ୈ 44 ճ Machine Learning 15minutes! 1
ࣗݾհ • ਿࢁ Ѩ • Software Engineer @ Repro AI
Labs • TensorFlow ίϯτϦϏϡʔλʔ • TFX : Issue ཱͯͨΓ PR ཱͯͨΓ • docs-l10n : ༁ & ϨϏϡʔ • ػցֶशਤؑ ڞஶ 2
ҙࣄ߲ • ͋͘·ͰݸਓతͳݟղͰ͋Γɺॴଐ͢Δ͍͔ͳΔஂମͱແؔ Ͱ͢ • σʔλαΠΤϯεͷ͋·Γ͠·ͤΜ • ػցֶशͷ͠·ͤΜ • COVID-19
ʹؔ͢Δকདྷ༧ଌͷ͠·ͤΜ • COVID-19 ͷײછ༧ͷ͠·ͤΜ 3
ຊͷ༰ 1.Open Data ͱ <- 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 4
Open Data ͱ • “Open data and content can be
freely used, modified, and shared by anyone for any purpose” from The Open Definition • ϚγϯϦʔμϒϧͰ͋Δ͜ͱॏཁࢹ • Data.gov : ΞϝϦΧͷΦʔϓϯσʔ λͷαΠτ (ӈਤ) • Data Portals : 588 ͷΦʔϓϯ σʔλͷΧλϩά 5
ຊͷ Open Data • ࣏ࣗମ͕ؤு͍ͬͯΔ • data.go.jp • σʔλγςΟḉߐϙʔλϧαΠτ •
͍͢͝ (ޙड़) • ౦ژΦʔϓϯσʔλΧλϩάαΠτ ϗʔϜϖʔδ 6
ΦʔϓϯσʔλΛ͡ΊΑ͏1 • ಠཱߦ๏ਓɺ࣏ࣗମͳͲ͕อ ༗͢Δެڞσʔλ͕ɺࠃຽاۀͳͲ ͷར׆༻͞Ε͍͢Α͏ʹػձಡʹ దͨ͠ܗͰɺೋ࣍ར༻Մೳͳϧʔϧͷ ͱͰެ։͞ΕΔ͜ͱɺ·ͨɺͦͷΑ ͏ʹެ։͞ΕͨσʔλΛࢦ͠·͢ 1 http://www.kantei.go.jp/jp/singi/it2/densi/kettei/
opendata_tebikisyo.pdf 7
σʔλγςΟḉߐϙʔ λϧαΠτ • ͞·͟·ͳσʔλΛ PDF Ͱͳ͘ CSV, XML, RDF, Linked
RDF Ͱެ ։͍ͯ͠Δ • ϥΠηϯε CC BY • ྉཧϨγϐ (XML) 8
9
͑͞࢈ࡊͷྉཧϨγϐ (ൈਮ) ݟ͢͞ͷͨΊɺ࠷ޙͷߦʹ͚ͩվߦΛՃ͑ͨ <http://linkdata.org/resource/rdf1s8262i#2> <http://www.w3.org/2000/01/rdf-schema#label> "2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%96%99%E7%90%86%E5%90%8D> "΄͏ΕΜͱ͠ͷφϜϧ"@ja ;
<http://linkdata.org/property/rdf1s8262i#%E4%BA%BA%E6%95%B0> "4ਓ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%991> "͠ 170gʢ2/3ାʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%92> "΄͏ΕΜ 130gʢ2/3ଋʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%93> "͕ܲΒεʔϓͷૉ খ͞͡2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%94> "͝·༉ খ̍͞͡"@ja ; <http://linkdata.org/property/rdf1s8262i#%E8%A9%B3%E7%B4%B0URL> <https://www.city.sabae.fukui.jp/kenko_fukushi/hoken_kenkozukuri/mugenyasai.files/receipi.pdf> . 10
͑͞࢈ࡊͷྉཧϨγϐ • http://linkdata.org/work/ rdf1s8262i • ߹ܭμϯϩʔυ 4 ճ (2020-04-23 ࣌)
• ࠷ऴߋ৽ : 2020/03/17 • Text, Excel, RDF ܗࣜ 11
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ <-
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 12
COVID19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ ٸʹσʔλެ։ɾ׆༻ͷಈ͖͕͕͍ͬͯΔɻ • ౦ژ ৽ܕίϩφΠϧεײછରࡦαΠτ •
৽ܕίϩφΠϧεରࡦμογϡϘʔυ 13
౦ژ ৽ܕίϩφ ΠϧεײછରࡦαΠ τ • ౦ژΦʔϓϯσʔλΧλϩάαΠτͷ σʔλ͔Β࡞ • αΠτࣗମ MIT
ϥΠηϯε • Code for Japan ͷ׆ಈͷ 1 ͭ 14
15
StopCovid19 શࠃ൛ • ౦ژͷΦʔϓϯιʔεΛར༻ͨ͠αΠ τͷ·ͱΊαΠτ • ͜ͷαΠτࣗମ MIT ϥΠηϯε •
codeforjapan/stopcovid19 16
৽ܕίϩφΠϧεର ࡦμογϡϘʔυ • ହհ (@taisukef) ࢯ • COVID-19 ͷױऀ͕ར༻Մೳͳපচ ʹணͨ͠αΠτ
• ްੜ࿑ಇলఏڙͷ৽ܕίϩφΠϧε ཅੑױऀ PDF σʔλΛ JSON-API Խͨ݁͠ՌΛར༻ • ιʔεCC BYϥΠηϯεͰఏڙ͞Εͯ ͍Δ 17
ಓݝผ৽ܕίϩφΠϧεײછऀϚοϓ • δϟοάδϟύϯגࣜձࣾ • σʔλ CC-BY-NC 4.0 • ༷ʑͳσʔλιʔε͔Βूܭ͍ͯ͠Δ ༷
(ෳਓʹΑΔ࡞ۀ) • ՄࢹԽ ArcGIS (ESRI) 18
தͷਓͷ • https://twitter.com/ oohamazaki/status/ 1253306592595832835?s=20 19
SIGNATE COVID-19 νϟϨϯδ • ϑΣʔζ 1. σʔληοτͷߏங • ϑΣʔζ 2.
σʔλੳ • ϑΣʔζ 3. ጶױऀ༧ଌ 20
21
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ 3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔
<- 22
ཁࢫ • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 23
ݸਓతͳ҆৺ • COVID-19 ʹؔ͢Δ AI ສೳ͕ग़ͯ ͍ͳ͍͜ͱ • ༧ଌϞσϧʹΑΔ༬ݴऀ͕࣍ʑʹݱΕ Δঢ়گͰͳ͍ͷෆதͷ͍
• σʔληοτͷඋͱ͍͏ͬͱॏ ཁͳՕॴʹϦιʔεׂ͕͔Ε͍ͯΔ 24
ػցֶशʹཱͭͷ͔ʁ • ػցֶश·Ͱͷεςοϓʹ͓͍ͯɺݱࡏۀͷఆٛͷஈ֊ 1.ۀ͕ະఆٛ 2.ۀ͕ఆٛ͞ΕɺखॱॻΛ࡞Δ 3.खॱ͕໌֬ʹͳΓɺγεςϜԽΛߦ͏ <- ࠓ͜ͷ͋ͨΓ 4.ใΛՄࢹԽ͠ɺҙࢥܾఆΛߦ͏ <-
ઐՈ͜͜ 5.ҙࢥܾఆͷࣗಈԽ or ิॿ <- ػցֶश͜͜ 25
σʔλαΠΤϯςΟετʹཱͭͷ͔ʁ • σʔλͷ׆༻ʹඞཁͳεΩϧͷ • σʔλαΠΤϯε • ΤϯδχΞϦϯά • υϝΠϯࣝ •
ҰൠͷσʔλαΠΤϯςΟετɾΤϯδχΞҩֶެऺӴੜ ͷ͕ࣝඞͣ͠๛ͱ͍͏Θ͚Ͱͳ͍ 26
ࣗʹԿ͕Ͱ͖ΔͷͩΖ͏͔ʁ • COVID-19 ͷײછͷ֦େঢ়گʹ͍ͭͯूΊΒΕͨσʔλɺඇ ઐՈͷखʹ༨Δ • Titanic ͷσʔλ͔ΒɺզʑԿ͔༗༻ͳݟΛಘΒΕͨͩ Ζ͏͔ʁ •
υϝΠϯࣝΛൈ͖ʹɺཧϞσϧػցֶशϞσϧΛ༻͍ͯ কདྷ༧ଌΛͨ͠ͱ͜ΖͰɺͦͷ݁ՌԿ͔ҙຯ͕͋ΔͩΖ͏ ͔ʁ 27
Amazon (AWS) ͷύ ϒϦοΫσʔλϨΠΫ • σʔλʹΞΫηε͘͢͠ͳͬͨ • ϚΫϩͳҙࢥܾఆ͔֬ʹͰ͖Δ͔ ͠Εͳ͍ •
զʑ͜ΕΛݟͯԿΛ͢Ε͍͍Μͩ Ζ͏͔ʁ 28
See how your community is moving around differently due to
COVID-192 • Google ͷϨϙʔτ • Transit stations Workplace ΛݮΒͤྑͦ͞͏ͳײ͕͢͡Δ • ײછऀΑΓམͪண͍ͯݟΒΕΔ 2 Google LLC "Google COVID-19 Community Mobility Reports." https://www.google.com/covid19/mobility/ Accessed: 2020-04-24. 29
զʑ͕ݟΔ͖ࢦඪ ͳʹ͔ʁ • ࣍ʹΔ͜ͱ͕ݟ͑ΔࢦඪΛݟ͍ͨ • ͜ΕͲͷۀʹண͖͔͢ͱ͍͏ ʹಉ͡ • ͍߹Θͤۀʹண͢Δ͜ͱΛఏҊ ͍ͨ͠
• ౦ژ ৽ܕίϩφίʔϧηϯλʔ૬ஊ ݅ͷྦྷܭ͕ઢܗʹ͔͠৳ͼ͍ͯͳ͍ 30
31
࣍ʹඋ͖͢σʔλͳʹ͔ʁ • ඞཁͳͷ͍߹Θͤͱͦͷճ • ༷ʑͳରࡦ͕ଧͨΕ͍ͯΔҰํɺ૭ޱͷΞΫηε໌֬Ͱͳ ͍ (ཧతʹॴʹߦ͚ͳ͍ʂ) ͷͰ͜͏͍ͬͨ૭ޱʹؔͳ ͍͍߹Θ͕ͤࡴ౸͍ͯ͠Δ͜ͱ͕༧͞ΕΔ •
Q&A σʔλΛ༻͍ͨݕࡧΤϯδϯ໌Β͔ʹ༗ޮ • Q&A σʔλͱγφϦΦΛݩʹͨ͠νϟοτϘοτ༗ޮ 32
33
https://corona.go.jp/ ʹઃஔࡁ 34
ఆ͞ΕΔ՝ • ηϯγςΟϒͳ࣭͕૬ྔدͤΒΕ Δ͜ͱ͕ఆ͞Εɺੜσʔλͷอ Ͱ͖ͳ͍ • ঢ়گ͕·͙Δ͘͠มԽ͢Δ݁Ռɺಉ ࣭͡ʹରͯ͠దͳճ͕ৗʹม ΘΓଓ͚ΔͨΊɺσʔληοτͷߋ৽ ͕ඞཁ
• લऀͱ͔͘ޙऀʹ͍ͭͯࢢຽͰ Ͱ͖Δ͜ͱ͕͋ΔͷͰ 35
ͳͥզʑϚεΫΛٻ Ίͯ͠·͏ͷ͔ • ڴҖʹରͯ͠Ͱ͖Δ͜ͱ͕ͳʹͳ͍ ͱ͍͏ετϨε͔ΒճආͰ͖Δ • ϚεΫങ͍ٻΊΔ͜ͱ͕Ͱ͖Δͷ Ͱɺڻҟʹରͯ͠औΕΔΞΫγϣϯʹ ͳ͍ͬͯΔ http://www.osaka-kyoiku.ac.jp/
~toyosawa/klecture09.pdf 36
σʔληοτͷඋࢢຽ͕ߦ͑ΔΞΫγϣϯ • ඇઐՈͰࢀՃͰ͖Δ • ࡞Δ͜ͱΑΓอक͢Δ͜ͱʹଟେͳख͕͔͔ؒΔ (ϦϯΫ Εσʔλͷܗࣜมߋͷରॲͱ͔) • σʔληοτ͕͋ΕΤϯδχΞͷྗͰιϑτΣΞʹͰ͖Δ •
ιϑτΣΞʹͰ͖Ε֦ࢄͰ͖Δ • SIGNATE ͷऔΓΈ͋Δҙຯཧత 37
Recap • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 38