Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
データ分析や機械学習などに用いる情報の集め方
Search
SAWADA Tadashi
March 07, 2018
Technology
1
990
データ分析や機械学習などに用いる情報の集め方
SAWADA Tadashi
March 07, 2018
Tweet
Share
More Decks by SAWADA Tadashi
See All by SAWADA Tadashi
2019-02-07-omotesandorb.pdf
cesare
0
100
Ruby for the machine learning projects
cesare
0
49
やってみようGitHub
cesare
3
340
Courseraを受講してみた
cesare
0
96
巻きますか
cesare
0
100
Other Decks in Technology
See All in Technology
初海外がre:Inventだった人間の感じたこと
tommy0124
1
180
AI時代の発信活動 ~技術者として認知してもらうための発信法~ / 20251028 Masaki Okuda
shift_evolve
PRO
1
140
OPENLOGI Company Profile for engineer
hr01
1
46k
サブドメインテイクオーバー事例紹介と対策について
mikit
11
4.3k
現場の壁を乗り越えて、 「計装注入」が拓く オブザーバビリティ / Beyond the Field Barriers: Instrumentation Injection and the Future of Observability
aoto
PRO
1
860
設計に疎いエンジニアでも始めやすいアーキテクチャドキュメント
phaya72
24
16k
AIを使ってテストを楽にする
kworkdev
PRO
0
400
IBC 2025 動画技術関連レポート / IBC 2025 Report
cyberagentdevelopers
PRO
2
240
Data Engineering Guide 2025 #data_summit_findy by @Kazaneya_PR / 20251106
kazaneya
PRO
0
290
re:Invent 2025の見どころと便利アイテムをご紹介 / Highlights and Useful Items for re:Invent 2025
yuj1osm
0
610
NOT A HOTEL SOFTWARE DECK (2025/11/06)
notahotel
0
1.3k
最近読んで良かった本 / Yokohama North Meetup #10
mktakuya
0
130
Featured
See All Featured
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
46
2.5k
The Invisible Side of Design
smashingmag
302
51k
The Straight Up "How To Draw Better" Workshop
denniskardys
239
140k
Designing for Performance
lara
610
69k
How To Stay Up To Date on Web Technology
chriscoyier
791
250k
Context Engineering - Making Every Token Count
addyosmani
8
330
YesSQL, Process and Tooling at Scale
rocio
174
15k
Practical Orchestrator
shlominoach
190
11k
Thoughts on Productivity
jonyablonski
72
4.9k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
140
34k
Balancing Empowerment & Direction
lara
5
710
Scaling GitHub
holman
463
140k
Transcript
ظ ٭ ذ ⮔ 卥 塌 唩 㳔 肪
ם ל מ 氠 ַ 䝠 㖥 ס 겏 ״ 偙 8FC槁㖪.FFUVQ 4BXBEB5BEBTIJBLB!DFTBSF
蔦 䉁 箩 ♃ ˖ 屴氭婞 ˖ !DFTBSF ˖ ؠٚؗغ٠٭ؠتס偙־
匡ױג ˖ XFCئ٭لت圸碎յ ظ٭ذ⮔卥յ塌唩㳔肪 ˖ 5PLZVSC
♀ 傽 ס 需 ˖ ⮔卥٬塌唩㳔肪םלסظ٭ذס겏״偙 ˖ ,1*㴻掾镸廠 ˖ ؓغٌشؠם겏阛
˖ 塌唩㳔肪氠ס㳔肪ظ٭ذ겏
㝕 ◜ ם ׆ כ ע 劄 ⮴ מ ˖
03NBQQFSךظ٭ذ겏阛סע״ױֹ ˖ 氠ꄫֿ沌ם ˖ ֵ珺䬲ׂ ˖ 㵅갾מ熏糉ג ˖ ꬃ镆׀גַ偙ע䥡镩⚶ך
ע ״ מ ַ ה ֽ ֹ
ئ ٭ ل ت ס 箩 ♃ ˖ ؠٚؗغ٠٭ؠتכַֹئ٭لت ˖ ؠٚؗغخ٭ب٤ء ˖ ֽ♐◜ס⮂⚶ַ笠
⯼ 䳀 ؠ ٚ ؗ غ ٠ ٭
ؠ ت ס بتطّ 圸 䧯 ˖ "84┪מ㺤ꪛ ˖ 3BJMTסXFCؓوٛآ٭ب٘٤ ˖ ئ٭لت佻ֻظ٭ذي٭تע.Z42- 3%4
겏 阛 ⽟ ס بتطّ 圸 䧯 R a
i l s M y S Q L R e d s h i f t ू ܭ ܥ R e d a s h F l y D a t a Ͱ ς ʔϒϧ Λ ಉ ظ K P I ఆ ؍ ଌ ͷ όο ν ͳ Ͳ Ξ υ ϗ ο Ϋ ͳ ੳ ئ٭لت勓✄ %8)
ؠ ٚ ؗ غ ٠ ٭ ؠ ت ך ⺅
䪒 ז י ַ 겏 阛 ˖ ,1*겏阛 ˖ ؓغٌشؠ겏阛 ˖ 塌唩㳔肪氠ظ٭ذ
, 1* 겏 阛 ˖ ⻄甦ס䭰埉㴻掾镸廠 ˖ 溫ꜗٗ٭ا٭俙䱿瓌 ˖
傽嬐ס㛿┪溷ם俙㲻
ؓ غ ٌ ش ؠ ם 겏 阛 ˖ 偡瞬✑䨏絊ג״ס⮔卥
˖ րوٞنؔ٭ٜ䝠㖥霄箖מ剹ַג偙ֿ⺇峜椙ע虘 ׂםדֹ־ց ˖ ⚕氺笠ס☭ך42-ֿ剹ׄ☭ֿ㝂ַ ˖ 42-Ⳉ䒣⚶םלꪛ⥎ג׆כ
塌 唩 㳔 肪 氠 ס ظ ٭ ذ
겏 ˖ 侷䊘ظ٭ذכם䝠㖥겏״יׂ ˖ 杅䖇ꓪ溷ם俙⡑ ˖ ط؞تعס婞锺ⵊ ˖ )5.-ذءꯙ⹛ ˖ 銨阾䴓ס鞪俠 ˖ 䓺䡢筶闋卥
ظ ٭ ذ ס 겏 ״ 偙
겏 阛 ⽟ ס بتطّ 圸 䧯 ⫙
陧 R a i l s M y S Q L R e d s h i f t ू ܭ ܥ R e d a s h F l y D a t a Ͱ ς ʔϒϧ Λ ಉ ظ K P I ఆ ؍ ଌ ͷ όο ν ͳ Ͳ Ξ υ ϗ ο Ϋ ͳ ੳ
ظ ٭ ذ 겏 阛 ס 偙 R
a i l s M y S Q L Redshift ू ܭ ࡁ Έ σ ʔ λ ͷ ς ʔϒϧ ܈ ಉ ظ ू ܭ ݁ Ռ Λ อ ଘ Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈
ظ ٭ ذ 겏 阛 ס 偙 ˖
3FETIJGUמؠؙٛ䫋ׅי겏阛 ˖ 겏阛篙卸3FETIJGUס⯁סط٭هٜמ⟛㲽
㵅 갾 מ ❈ ז י ַ ص ٭ٜ 꿔
˖ CSJDPMBHF ˖ 3FETIJGUמֵظ٭ذ겏阛י3FETIJGUמط٭هٜ✑זי 呬等 ˖ ٠٭ؠنٞ٭ؙ٤ة٤ס䔢ⰺ ˖ FNCVML ˖ 3FETIJGUמֵظ٭ذ⯁ס%#םל瓌 ˖ نٜؔذ٭وٚءؕ٤ךظ٭ذס婞锺ⵊםל ˖ 겏阛笠ע׆סחךדַגַꪨמ⻉ֹ
㵅 갾 מ ❈ ז י ַ ص ٭ٜ 꿔
R a i l s M y S Q L Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈ Redshift E l a s t i c s e a rc h ू ܭ ࡁ Έ σ ʔ λ ͷ ς ʔϒϧ ܈ e m b u l k b r i c o l a g e
겏 阛 ס 鞏 꾴
겏 阛 ס 鞏 꾴 ˖ 塌ⳛ䙎ֿכיꓨ锡
겏 阛 מ ֽ ׄ 塌 ⳛ 䙎 כ
ע ˖ 겏阛ظ٭ذסꃯⲎ٬㜟剳ֿ筶僃ׂך׀׆כ ˖ 雧鉿꜔靯ס㝂ַ塌唩㳔肪ךע杅מ㝕◜
塌 ⳛ 䙎 ֿ ם ַ 枱 䡢 כ ע
˖ ظ٭ذ㙟סמ䩘ꪨכ免ꪨֿ־־ ˖ 偆ַظ٭ذֿ䖩锡מםגצמյ ┞־겏阛篁ײ皑ייַ ˖ 債㲽ؠֿؙٛ良㝕ⵊיַיյ 꽃潨┞ח鳉ס㝕㜟 ˖ חַ
ؠ ٚ ؗ غ ٠ ٭ ؠت ך ס
㸴 ⪽ ✄ 溷 ם ❛ ˖ ր偆ס☭כٛم٭ذס☭כךӶӶס⡑מ ꇙֵַֿ־ց ˖ ӶӶמע坎չםفؙٛ٭ب٘٤ֿ ˖ ؛ٛةػٜ%#מր偆ցրٛم٭ذ٭ցס نٚءעםַ ˖ סךյ겏阛ך꽒䒟
偆 כ ٛ م٭ ذ ٭ ˖ 偆גםր偆כٛم٭ذ٭⯁סӝӝס겏阛⡑ց 䖩锡מם䍲מ砯⮂כⲯ椙ֿ虘ׂםַ
˖ ր璓⚻סذٝ溷ؠؙٛցֿ嵣ꄼյ⻄䨾מؤمً ˖ ئ٭لت勓✄⣨ךظ٭ذס䓺ֿ㜟כ媃ןח ˖ ր偆כٛم٭ذ٭⯁סӶӶյמ┾♣⯁מ⮔闋 גַցכ־阋ככי긖⠱ ˖ 㸐䗎מ䩘ꪨֿ־־յ債㲽ס겏阛㚷ַ
䖩 锡 ד ז ג ס ˖ ٗ٭ا٭ֿ偆םס־ٛم٭ذ٭םס־銨نٚء ˖
阛砯座ײסط٭هֵֿٜףKPJOי⫙⯈氠ך׀ ˖ ┾♣⯁מ⮔ׄגַ ˖ ٗ٭ا٭ס┾♣銨⡑䭥חط٭هٜ✑
䖩 锡 ד ז ג ס ˖ 劄箽溷מ姯ַظ٭ذדׄךעםׂ ˖
겏阛ꇃ瓦סظ٭ذ⟛㲽יֽׂכ⫙⯈氠ך׀י➬⯈ ˖ ⛰յלַֹֹظ٭ذ氠䟨ס־ס陭阛עꓨ锡
겏 阛 ꇃ 瓦 ⟛ 㲽 ْؕ
٭ة Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈ Redshift ࠷ ऴ త ͳ ू ܭ ݁ Ռ ͷ ς ʔϒϧ ܈ ू ܭ ա ఔ ͷ ς ʔϒϧ ܈ • ৽ ࢀ o r Ϧ ϐʔ λ ʔ • ੈ ৽ ࢀ ɾ Ϧ ϐʔ λ ʔ ผ ͷ K P I Ξ υ ϗ ο Ϋ ू ܭ Ͱ ར ༻
겏 阛 ꇃ 瓦 ظ ٭ ذ ל ֹ
锶 ־ ˖ ✇⪪ꪛظ٭ذכ־ֿ㝕◜ ˖ ┞䍲⪪ꪛכ摾ꬃמ㜟ֻםׂם ˖ ◦䳕䙎ゼ꾴 ˖ 熏כ㴻掾镸廠ؠؙٛםלֿ⻄䨾ך媃ן ˖ ր✇יםַסמ㚷ױגց
ظ ٭ ذ ⪪ ꪛ ס 㕈 勓 䭰 ꓹ
˖ ם؆ך־؆ך궢⮂םַ ˖ 꾗⮂قذ٭٤םל锶嚋״חחյ⮂ס⹌ꈷ ˖ وٞءِٚ٤ءכ⻎ ˖ QVCMJDQSJWBUF❈ַ⮔ׄ ˖ 锶י虘ַסדׄQVCMJDמ ˖ QVCMJDמגظ٭ذע◦䳕䙎מ宜ꏕ
Q V C M J M D ם ط
٭هٜյ Q S J WB U F ם ط ٭هٜ ˖ %#ס⻏⯼疾ꪨכ埫ꮹ陭㴻ס篁ײ⻉ ˖ ׆ס⻏⯼疾ꪨמֵط٭هٜעQVCMJD ˖ ׆סꏕ┫עQSJWBUF ˖ 3FETIJGUדכ ր׆ס⻏⯼疾ꪨסꏕ┫מյ ׆סٗ٭ا٭ֿ✑זגط٭هٜעյ ׆סٞ٭ٜ䭥ח☭ꇖמ锶ֹֻמց כַֹ陭㴻ֿך׀
⪪ ꪛ ظ ٭ ذ ط ٭هٜ ס 陭 阛
˖ ⷃ┞סր⪢ꌃ⪜ցط٭هٜךעםׂյ 㝂俙ס㸯םط٭هٜמ ˖ 偆PSٛم٭ذ٭銨ط٭هٜ ˖ ٗ٭ا٭ס┾♣銨ط٭هٜ ˖ 㸯ַط٭هٜ篁ײ⻉י姯ַ䝠㖥䕑 ˖ ٝإهٞشؠ✑ْؕ٭ة ˖ 劄㸯ⷃ⛺סهٞشؠ⺅䲩ֻ
鏿 겧 ס 갧 㺽 ˖ ⷃ⛺هٞشؠ篁ײ⻉יյ㸴㝕׀ַق٭ص✑ ˖
ٗ٭ا٭ס偆PSٛم٭ذ٭銨ط٭هٜ ˖ ֵ䗎Ⳬֿ偆ٗ٭ا٭מס־ٛم٭ذ٭מ ס־銨ط٭هٜ ˖ 嫘갧溷מ鏿겧םق٭ص篁ײ┪ׅ
ෳ ࡶ ͞ ͷ ֊ Φ Ϧ δ φϧ
ͷ ς ʔϒϧ ܈ Redshift ࠷ ऴ త ͳ ू ܭ ݁ Ռ ͷ ς ʔϒϧ ܈ ج ຊ ଐ ੑ ͷ ς ʔϒϧ ܈ γ ϯ ϓϧ ͳ ύʔ π Λ ἧ ͑Δ ੜ ς ʔϒϧ ܈ Α Γ ෳ ࡶ ͳ σ ʔ λ Λ ੜ
ױ כ ״ ˖ ظ٭ذ겏阛ס塌ⳛ䙎 ˖ ꄫ╚겏阛ط٭هٜ⪪ꪛ ˖ ⪪ꪛط٭هٜס偙ꓹ٬陭阛