Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
COVID-19 に対するオープンデータの取り組み
Search
Asei Sugiyama
April 25, 2020
Technology
0
140
COVID-19 に対するオープンデータの取り組み
第44回 Machine Learning 15minutes! で登壇した際の資料です
Asei Sugiyama
April 25, 2020
Tweet
Share
More Decks by Asei Sugiyama
See All by Asei Sugiyama
生成 AI の評価方法
asei
8
1.3k
対話品質の評価に向き合う
asei
4
340
Kubeflow Pipelines v2 で変わる機械学習パイプライン開発
asei
5
930
遊戯王 AI は次世代のグランドチャレンジになりうるか
asei
0
190
Vertex AI ではじめる MLOps
asei
3
120
MLSE 機械学習オペレーション WG と LangCheck の活動に関するお礼
asei
1
66
Vertex AI Feature Store に 機械学習エンジニアが涙した 理由
asei
2
1.8k
Cloud Next '23 から考える LLMOps
asei
3
870
Azure Architecture Center における MLOps Framework の概要と比較
asei
2
900
Other Decks in Technology
See All in Technology
コミュニティサービスに「あなたへ」フィードを リリースするまでの試行錯誤
takapy
1
160
エンジニアリングマネージャーはどう学んでいくのか #devsumi / How Do Engineering Managers Continue to Learn and Grow?
expajp
4
1.3k
公共領域から学ぶ クラウド移行についてエンジニアが意識していること
kawakawa2222
0
140
OSSコミットしてZennの課題を解決した話
dyoshikawa1993
0
150
推薦システムを本番導入する上で一番優先すべきだったこと~NewsPicks記事推薦機能の改善事例を元に~
morinota
1
150
ソフトウェアエンジニアリングの知見を活かして データ基盤をいい感じにする on Snowflake [MIERUNE BBQ #10]
mtpooh
2
160
シフトレフトで挑む セキュリティの生産性向上
sekido
PRO
0
270
開発生産性をむしろ向上させる セキュリティパートナーの作り方 / Dev Productivity Con 2024
flatt_security
0
400
楽しくGoを学び合う、LayerXの勉強会文化 / LayerX's study culture of having fun and learning Go together
ar_tama
2
350
完全に理解した!生成AI自社プロダクトのアジャイル開発の進め方!/ Fully understood! Agile tips for developing our generative AI product!(AOAI Dev Day)
jnymyk
1
150
累計ダウンロード数1億8000万を超えるアプリケーションプラットフォームのレガシーシステム脱却とモダン化への道
kmitsuhashi
0
120
データベース研修 DB基礎【MIXI 24新卒技術研修】
mixi_engineers
PRO
0
230
Featured
See All Featured
Being A Developer After 40
akosma
72
580k
Java REST API Framework Comparison - PWX 2021
mraible
PRO
20
7.2k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
224
21k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
12
3.8k
Visualization
eitanlees
139
14k
Debugging Ruby Performance
tmm1
71
11k
jQuery: Nuts, Bolts and Bling
dougneiner
61
7.4k
Side Projects
sachag
451
42k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
189
16k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
228
16k
Infographics Made Easy
chrislema
238
18k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
26
1.6k
Transcript
COVID-19 ʹؔ͢Δ ΦʔϓϯσʔλͷऔΓΈ ୈ 44 ճ Machine Learning 15minutes! 1
ࣗݾհ • ਿࢁ Ѩ • Software Engineer @ Repro AI
Labs • TensorFlow ίϯτϦϏϡʔλʔ • TFX : Issue ཱͯͨΓ PR ཱͯͨΓ • docs-l10n : ༁ & ϨϏϡʔ • ػցֶशਤؑ ڞஶ 2
ҙࣄ߲ • ͋͘·ͰݸਓతͳݟղͰ͋Γɺॴଐ͢Δ͍͔ͳΔஂମͱແؔ Ͱ͢ • σʔλαΠΤϯεͷ͋·Γ͠·ͤΜ • ػցֶशͷ͠·ͤΜ • COVID-19
ʹؔ͢Δকདྷ༧ଌͷ͠·ͤΜ • COVID-19 ͷײછ༧ͷ͠·ͤΜ 3
ຊͷ༰ 1.Open Data ͱ <- 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 4
Open Data ͱ • “Open data and content can be
freely used, modified, and shared by anyone for any purpose” from The Open Definition • ϚγϯϦʔμϒϧͰ͋Δ͜ͱॏཁࢹ • Data.gov : ΞϝϦΧͷΦʔϓϯσʔ λͷαΠτ (ӈਤ) • Data Portals : 588 ͷΦʔϓϯ σʔλͷΧλϩά 5
ຊͷ Open Data • ࣏ࣗମ͕ؤு͍ͬͯΔ • data.go.jp • σʔλγςΟḉߐϙʔλϧαΠτ •
͍͢͝ (ޙड़) • ౦ژΦʔϓϯσʔλΧλϩάαΠτ ϗʔϜϖʔδ 6
ΦʔϓϯσʔλΛ͡ΊΑ͏1 • ಠཱߦ๏ਓɺ࣏ࣗମͳͲ͕อ ༗͢Δެڞσʔλ͕ɺࠃຽاۀͳͲ ͷར׆༻͞Ε͍͢Α͏ʹػձಡʹ దͨ͠ܗͰɺೋ࣍ར༻Մೳͳϧʔϧͷ ͱͰެ։͞ΕΔ͜ͱɺ·ͨɺͦͷΑ ͏ʹެ։͞ΕͨσʔλΛࢦ͠·͢ 1 http://www.kantei.go.jp/jp/singi/it2/densi/kettei/
opendata_tebikisyo.pdf 7
σʔλγςΟḉߐϙʔ λϧαΠτ • ͞·͟·ͳσʔλΛ PDF Ͱͳ͘ CSV, XML, RDF, Linked
RDF Ͱެ ։͍ͯ͠Δ • ϥΠηϯε CC BY • ྉཧϨγϐ (XML) 8
9
͑͞࢈ࡊͷྉཧϨγϐ (ൈਮ) ݟ͢͞ͷͨΊɺ࠷ޙͷߦʹ͚ͩվߦΛՃ͑ͨ <http://linkdata.org/resource/rdf1s8262i#2> <http://www.w3.org/2000/01/rdf-schema#label> "2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%96%99%E7%90%86%E5%90%8D> "΄͏ΕΜͱ͠ͷφϜϧ"@ja ;
<http://linkdata.org/property/rdf1s8262i#%E4%BA%BA%E6%95%B0> "4ਓ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%991> "͠ 170gʢ2/3ାʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%92> "΄͏ΕΜ 130gʢ2/3ଋʣ"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%93> "͕ܲΒεʔϓͷૉ খ͞͡2"@ja ; <http://linkdata.org/property/rdf1s8262i#%E6%9D%90%E6%96%99%EF%BC%94> "͝·༉ খ̍͞͡"@ja ; <http://linkdata.org/property/rdf1s8262i#%E8%A9%B3%E7%B4%B0URL> <https://www.city.sabae.fukui.jp/kenko_fukushi/hoken_kenkozukuri/mugenyasai.files/receipi.pdf> . 10
͑͞࢈ࡊͷྉཧϨγϐ • http://linkdata.org/work/ rdf1s8262i • ߹ܭμϯϩʔυ 4 ճ (2020-04-23 ࣌)
• ࠷ऴߋ৽ : 2020/03/17 • Text, Excel, RDF ܗࣜ 11
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ <-
3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔ 12
COVID19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ ٸʹσʔλެ։ɾ׆༻ͷಈ͖͕͕͍ͬͯΔɻ • ౦ژ ৽ܕίϩφΠϧεײછରࡦαΠτ •
৽ܕίϩφΠϧεରࡦμογϡϘʔυ 13
౦ژ ৽ܕίϩφ ΠϧεײછରࡦαΠ τ • ౦ژΦʔϓϯσʔλΧλϩάαΠτͷ σʔλ͔Β࡞ • αΠτࣗମ MIT
ϥΠηϯε • Code for Japan ͷ׆ಈͷ 1 ͭ 14
15
StopCovid19 શࠃ൛ • ౦ژͷΦʔϓϯιʔεΛར༻ͨ͠αΠ τͷ·ͱΊαΠτ • ͜ͷαΠτࣗମ MIT ϥΠηϯε •
codeforjapan/stopcovid19 16
৽ܕίϩφΠϧεର ࡦμογϡϘʔυ • ହհ (@taisukef) ࢯ • COVID-19 ͷױऀ͕ར༻Մೳͳපচ ʹணͨ͠αΠτ
• ްੜ࿑ಇলఏڙͷ৽ܕίϩφΠϧε ཅੑױऀ PDF σʔλΛ JSON-API Խͨ݁͠ՌΛར༻ • ιʔεCC BYϥΠηϯεͰఏڙ͞Εͯ ͍Δ 17
ಓݝผ৽ܕίϩφΠϧεײછऀϚοϓ • δϟοάδϟύϯגࣜձࣾ • σʔλ CC-BY-NC 4.0 • ༷ʑͳσʔλιʔε͔Βूܭ͍ͯ͠Δ ༷
(ෳਓʹΑΔ࡞ۀ) • ՄࢹԽ ArcGIS (ESRI) 18
தͷਓͷ • https://twitter.com/ oohamazaki/status/ 1253306592595832835?s=20 19
SIGNATE COVID-19 νϟϨϯδ • ϑΣʔζ 1. σʔληοτͷߏங • ϑΣʔζ 2.
σʔλੳ • ϑΣʔζ 3. ጶױऀ༧ଌ 20
21
ຊͷ༰ 1.Open Data ͱ 2.COVID-19 ʹؔ͢Δ Open Data ͱͦͷ׆༻ 3.զʑσʔλͰԿ͕Ͱ͖Δͷ͔
<- 22
ཁࢫ • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 23
ݸਓతͳ҆৺ • COVID-19 ʹؔ͢Δ AI ສೳ͕ग़ͯ ͍ͳ͍͜ͱ • ༧ଌϞσϧʹΑΔ༬ݴऀ͕࣍ʑʹݱΕ Δঢ়گͰͳ͍ͷෆதͷ͍
• σʔληοτͷඋͱ͍͏ͬͱॏ ཁͳՕॴʹϦιʔεׂ͕͔Ε͍ͯΔ 24
ػցֶशʹཱͭͷ͔ʁ • ػցֶश·Ͱͷεςοϓʹ͓͍ͯɺݱࡏۀͷఆٛͷஈ֊ 1.ۀ͕ະఆٛ 2.ۀ͕ఆٛ͞ΕɺखॱॻΛ࡞Δ 3.खॱ͕໌֬ʹͳΓɺγεςϜԽΛߦ͏ <- ࠓ͜ͷ͋ͨΓ 4.ใΛՄࢹԽ͠ɺҙࢥܾఆΛߦ͏ <-
ઐՈ͜͜ 5.ҙࢥܾఆͷࣗಈԽ or ิॿ <- ػցֶश͜͜ 25
σʔλαΠΤϯςΟετʹཱͭͷ͔ʁ • σʔλͷ׆༻ʹඞཁͳεΩϧͷ • σʔλαΠΤϯε • ΤϯδχΞϦϯά • υϝΠϯࣝ •
ҰൠͷσʔλαΠΤϯςΟετɾΤϯδχΞҩֶެऺӴੜ ͷ͕ࣝඞͣ͠๛ͱ͍͏Θ͚Ͱͳ͍ 26
ࣗʹԿ͕Ͱ͖ΔͷͩΖ͏͔ʁ • COVID-19 ͷײછͷ֦େঢ়گʹ͍ͭͯूΊΒΕͨσʔλɺඇ ઐՈͷखʹ༨Δ • Titanic ͷσʔλ͔ΒɺզʑԿ͔༗༻ͳݟΛಘΒΕͨͩ Ζ͏͔ʁ •
υϝΠϯࣝΛൈ͖ʹɺཧϞσϧػցֶशϞσϧΛ༻͍ͯ কདྷ༧ଌΛͨ͠ͱ͜ΖͰɺͦͷ݁ՌԿ͔ҙຯ͕͋ΔͩΖ͏ ͔ʁ 27
Amazon (AWS) ͷύ ϒϦοΫσʔλϨΠΫ • σʔλʹΞΫηε͘͢͠ͳͬͨ • ϚΫϩͳҙࢥܾఆ͔֬ʹͰ͖Δ͔ ͠Εͳ͍ •
զʑ͜ΕΛݟͯԿΛ͢Ε͍͍Μͩ Ζ͏͔ʁ 28
See how your community is moving around differently due to
COVID-192 • Google ͷϨϙʔτ • Transit stations Workplace ΛݮΒͤྑͦ͞͏ͳײ͕͢͡Δ • ײછऀΑΓམͪண͍ͯݟΒΕΔ 2 Google LLC "Google COVID-19 Community Mobility Reports." https://www.google.com/covid19/mobility/ Accessed: 2020-04-24. 29
զʑ͕ݟΔ͖ࢦඪ ͳʹ͔ʁ • ࣍ʹΔ͜ͱ͕ݟ͑ΔࢦඪΛݟ͍ͨ • ͜ΕͲͷۀʹண͖͔͢ͱ͍͏ ʹಉ͡ • ͍߹Θͤۀʹண͢Δ͜ͱΛఏҊ ͍ͨ͠
• ౦ژ ৽ܕίϩφίʔϧηϯλʔ૬ஊ ݅ͷྦྷܭ͕ઢܗʹ͔͠৳ͼ͍ͯͳ͍ 30
31
࣍ʹඋ͖͢σʔλͳʹ͔ʁ • ඞཁͳͷ͍߹Θͤͱͦͷճ • ༷ʑͳରࡦ͕ଧͨΕ͍ͯΔҰํɺ૭ޱͷΞΫηε໌֬Ͱͳ ͍ (ཧతʹॴʹߦ͚ͳ͍ʂ) ͷͰ͜͏͍ͬͨ૭ޱʹؔͳ ͍͍߹Θ͕ͤࡴ౸͍ͯ͠Δ͜ͱ͕༧͞ΕΔ •
Q&A σʔλΛ༻͍ͨݕࡧΤϯδϯ໌Β͔ʹ༗ޮ • Q&A σʔλͱγφϦΦΛݩʹͨ͠νϟοτϘοτ༗ޮ 32
33
https://corona.go.jp/ ʹઃஔࡁ 34
ఆ͞ΕΔ՝ • ηϯγςΟϒͳ࣭͕૬ྔدͤΒΕ Δ͜ͱ͕ఆ͞Εɺੜσʔλͷอ Ͱ͖ͳ͍ • ঢ়گ͕·͙Δ͘͠มԽ͢Δ݁Ռɺಉ ࣭͡ʹରͯ͠దͳճ͕ৗʹม ΘΓଓ͚ΔͨΊɺσʔληοτͷߋ৽ ͕ඞཁ
• લऀͱ͔͘ޙऀʹ͍ͭͯࢢຽͰ Ͱ͖Δ͜ͱ͕͋ΔͷͰ 35
ͳͥզʑϚεΫΛٻ Ίͯ͠·͏ͷ͔ • ڴҖʹରͯ͠Ͱ͖Δ͜ͱ͕ͳʹͳ͍ ͱ͍͏ετϨε͔ΒճආͰ͖Δ • ϚεΫങ͍ٻΊΔ͜ͱ͕Ͱ͖Δͷ Ͱɺڻҟʹରͯ͠औΕΔΞΫγϣϯʹ ͳ͍ͬͯΔ http://www.osaka-kyoiku.ac.jp/
~toyosawa/klecture09.pdf 36
σʔληοτͷඋࢢຽ͕ߦ͑ΔΞΫγϣϯ • ඇઐՈͰࢀՃͰ͖Δ • ࡞Δ͜ͱΑΓอक͢Δ͜ͱʹଟେͳख͕͔͔ؒΔ (ϦϯΫ Εσʔλͷܗࣜมߋͷରॲͱ͔) • σʔληοτ͕͋ΕΤϯδχΞͷྗͰιϑτΣΞʹͰ͖Δ •
ιϑτΣΞʹͰ͖Ε֦ࢄͰ͖Δ • SIGNATE ͷऔΓΈ͋Δҙຯཧత 37
Recap • σʔλ͕࣍ʑʹެ։͞Ε͍ͯΔ͕ɺඇઐՈͰ͋ΔҰൠࢢຽ͕ ݟͯಘΒΕΔͷগͳ͍ • ૬ஊ݅ͷരൃతͳ૿େ͕ͳ͍ͱ͍͏͜ͱɺ૭ޱ͕ർฐͯ͠ ͍ΔՄೳੑΛࣔ͢ • Ұൠࢢຽͱͯ࣍͠ʹ Q&A
Λඋ͠ɺͦΕΛΞΫηε͍͢͠ ܗͰఏڙͰ͖ΔΑ͏ʹ͢Δ͜ͱΛఏҊ͍ͨ͠ 38