Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
データ分析や機械学習などに用いる情報の集め方
Search
SAWADA Tadashi
March 07, 2018
Technology
1k
1
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
データ分析や機械学習などに用いる情報の集め方
SAWADA Tadashi
March 07, 2018
More Decks by SAWADA Tadashi
See All by SAWADA Tadashi
2019-02-07-omotesandorb.pdf
cesare
0
110
Ruby for the machine learning projects
cesare
0
59
やってみようGitHub
cesare
3
360
Courseraを受講してみた
cesare
0
110
巻きますか
cesare
0
110
Other Decks in Technology
See All in Technology
Claude Codeで開発以外の業務も爆速化しよう!
minorun365
PRO
12
9.3k
どんな手を使っても絶対間に合わせるスケジューラ
asari194617
0
1.5k
Claude Codeの体系的な理解と知識のフック
oikon48
10
6.2k
Bill One 開発エンジニア 紹介資料
sansan33
PRO
7
20k
人気商品が「ちゃんと買える」をつくる ー ECの負荷改善
ykagano
1
130
AWSとGitHub Actionsの責任境界と 組織で安全に使用する取り組み
nealle
1
240
ClaudeCodeでセキュリティ監視業務を半自動化_1年の運用でわかったAIに任せる設計の5つのポイント
kintotechdev
4
1k
Hub & Spoke 環境のネットワークルーティングを分解してみる
tsuyataku
1
470
いかに伝えるか 〜新卒エンジニアの教育のための、ライトノベル活用の一例
ikedon
1
130
AIエージェントを雇う前に決める5つのこと
knishioka
1
110
Self Healing Rollouts: Automating Production Fixes with Agentic AI
kdubois
0
110
Introduction to Sansan, inc / Sansan Global Development Center, Inc.
sansan33
PRO
0
3.2k
Featured
See All Featured
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
234
17k
We Are The Robots
honzajavorek
0
320
The #1 spot is gone: here's how to win anyway
tamaranovitovic
3
1.1k
Measuring Dark Social's Impact On Conversion and Attribution
stephenakadiri
2
260
Test your architecture with Archunit
thirion
2
2.4k
Tips & Tricks on How to Get Your First Job In Tech
honzajavorek
1
710
RailsConf 2023
tenderlove
30
1.5k
[RailsConf 2023] Rails as a piece of cake
palkan
59
6.9k
Efficient Content Optimization with Google Search Console & Apps Script
katarinadahlin
PRO
1
830
Rebuilding a faster, lazier Slack
samanthasiow
85
9.6k
16th Malabo Montpellier Forum Presentation
akademiya2063
PRO
0
370
DevOps and Value Stream Thinking: Enabling flow, efficiency and business value
helenjbeal
1
370
Transcript
ظ ٭ ذ ⮔ 卥 塌 唩 㳔 肪
ם ל מ 氠 ַ 䝠 㖥 ס 겏 ״ 偙 8FC槁㖪.FFUVQ 4BXBEB5BEBTIJBLB!DFTBSF
蔦 䉁 箩 ♃ ˖ 屴氭婞 ˖ !DFTBSF ˖ ؠٚؗغ٠٭ؠتס偙־
匡ױג ˖ XFCئ٭لت圸碎յ ظ٭ذ⮔卥յ塌唩㳔肪 ˖ 5PLZVSC
♀ 傽 ס 需 ˖ ⮔卥٬塌唩㳔肪םלסظ٭ذס겏״偙 ˖ ,1*㴻掾镸廠 ˖ ؓغٌشؠם겏阛
˖ 塌唩㳔肪氠ס㳔肪ظ٭ذ겏
㝕 ◜ ם ׆ כ ע 劄 ⮴ מ ˖
03NBQQFSךظ٭ذ겏阛סע״ױֹ ˖ 氠ꄫֿ沌ם ˖ ֵ珺䬲ׂ ˖ 㵅갾מ熏糉ג ˖ ꬃ镆׀גַ偙ע䥡镩⚶ך
ע ״ מ ַ ה ֽ ֹ
ئ ٭ ل ت ס 箩 ♃ ˖ ؠٚؗغ٠٭ؠتכַֹئ٭لت ˖ ؠٚؗغخ٭ب٤ء ˖ ֽ♐◜ס⮂⚶ַ笠
⯼ 䳀 ؠ ٚ ؗ غ ٠ ٭
ؠ ت ס بتطّ 圸 䧯 ˖ "84┪מ㺤ꪛ ˖ 3BJMTסXFCؓوٛآ٭ب٘٤ ˖ ئ٭لت佻ֻظ٭ذي٭تע.Z42- 3%4
겏 阛 ⽟ ס بتطّ 圸 䧯 R a
i l s M y S Q L R e d s h i f t ू ܭ ܥ R e d a s h F l y D a t a Ͱ ς ʔϒϧ Λ ಉ ظ K P I ఆ ؍ ଌ ͷ όο ν ͳ Ͳ Ξ υ ϗ ο Ϋ ͳ ੳ ئ٭لت勓✄ %8)
ؠ ٚ ؗ غ ٠ ٭ ؠ ت ך ⺅
䪒 ז י ַ 겏 阛 ˖ ,1*겏阛 ˖ ؓغٌشؠ겏阛 ˖ 塌唩㳔肪氠ظ٭ذ
, 1* 겏 阛 ˖ ⻄甦ס䭰埉㴻掾镸廠 ˖ 溫ꜗٗ٭ا٭俙䱿瓌 ˖
傽嬐ס㛿┪溷ם俙㲻
ؓ غ ٌ ش ؠ ם 겏 阛 ˖ 偡瞬✑䨏絊ג״ס⮔卥
˖ րوٞنؔ٭ٜ䝠㖥霄箖מ剹ַג偙ֿ⺇峜椙ע虘 ׂםדֹ־ց ˖ ⚕氺笠ס☭ך42-ֿ剹ׄ☭ֿ㝂ַ ˖ 42-Ⳉ䒣⚶םלꪛ⥎ג׆כ
塌 唩 㳔 肪 氠 ס ظ ٭ ذ
겏 ˖ 侷䊘ظ٭ذכם䝠㖥겏״יׂ ˖ 杅䖇ꓪ溷ם俙⡑ ˖ ط؞تعס婞锺ⵊ ˖ )5.-ذءꯙ⹛ ˖ 銨阾䴓ס鞪俠 ˖ 䓺䡢筶闋卥
ظ ٭ ذ ס 겏 ״ 偙
겏 阛 ⽟ ס بتطّ 圸 䧯 ⫙
陧 R a i l s M y S Q L R e d s h i f t ू ܭ ܥ R e d a s h F l y D a t a Ͱ ς ʔϒϧ Λ ಉ ظ K P I ఆ ؍ ଌ ͷ όο ν ͳ Ͳ Ξ υ ϗ ο Ϋ ͳ ੳ
ظ ٭ ذ 겏 阛 ס 偙 R
a i l s M y S Q L Redshift ू ܭ ࡁ Έ σ ʔ λ ͷ ς ʔϒϧ ܈ ಉ ظ ू ܭ ݁ Ռ Λ อ ଘ Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈
ظ ٭ ذ 겏 阛 ס 偙 ˖
3FETIJGUמؠؙٛ䫋ׅי겏阛 ˖ 겏阛篙卸3FETIJGUס⯁סط٭هٜמ⟛㲽
㵅 갾 מ ❈ ז י ַ ص ٭ٜ 꿔
˖ CSJDPMBHF ˖ 3FETIJGUמֵظ٭ذ겏阛י3FETIJGUמط٭هٜ✑זי 呬等 ˖ ٠٭ؠنٞ٭ؙ٤ة٤ס䔢ⰺ ˖ FNCVML ˖ 3FETIJGUמֵظ٭ذ⯁ס%#םל瓌 ˖ نٜؔذ٭وٚءؕ٤ךظ٭ذס婞锺ⵊםל ˖ 겏阛笠ע׆סחךדַגַꪨמ⻉ֹ
㵅 갾 מ ❈ ז י ַ ص ٭ٜ 꿔
R a i l s M y S Q L Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈ Redshift E l a s t i c s e a rc h ू ܭ ࡁ Έ σ ʔ λ ͷ ς ʔϒϧ ܈ e m b u l k b r i c o l a g e
겏 阛 ס 鞏 꾴
겏 阛 ס 鞏 꾴 ˖ 塌ⳛ䙎ֿכיꓨ锡
겏 阛 מ ֽ ׄ 塌 ⳛ 䙎 כ
ע ˖ 겏阛ظ٭ذסꃯⲎ٬㜟剳ֿ筶僃ׂך׀׆כ ˖ 雧鉿꜔靯ס㝂ַ塌唩㳔肪ךע杅מ㝕◜
塌 ⳛ 䙎 ֿ ם ַ 枱 䡢 כ ע
˖ ظ٭ذ㙟סמ䩘ꪨכ免ꪨֿ־־ ˖ 偆ַظ٭ذֿ䖩锡מםגצמյ ┞־겏阛篁ײ皑ייַ ˖ 債㲽ؠֿؙٛ良㝕ⵊיַיյ 꽃潨┞ח鳉ס㝕㜟 ˖ חַ
ؠ ٚ ؗ غ ٠ ٭ ؠت ך ס
㸴 ⪽ ✄ 溷 ם ❛ ˖ ր偆ס☭כٛم٭ذס☭כךӶӶס⡑מ ꇙֵַֿ־ց ˖ ӶӶמע坎չםفؙٛ٭ب٘٤ֿ ˖ ؛ٛةػٜ%#מր偆ցրٛم٭ذ٭ցס نٚءעםַ ˖ סךյ겏阛ך꽒䒟
偆 כ ٛ م٭ ذ ٭ ˖ 偆גםր偆כٛم٭ذ٭⯁סӝӝס겏阛⡑ց 䖩锡מם䍲מ砯⮂כⲯ椙ֿ虘ׂםַ
˖ ր璓⚻סذٝ溷ؠؙٛցֿ嵣ꄼյ⻄䨾מؤمً ˖ ئ٭لت勓✄⣨ךظ٭ذס䓺ֿ㜟כ媃ןח ˖ ր偆כٛم٭ذ٭⯁סӶӶյמ┾♣⯁מ⮔闋 גַցכ־阋ככי긖⠱ ˖ 㸐䗎מ䩘ꪨֿ־־յ債㲽ס겏阛㚷ַ
䖩 锡 ד ז ג ס ˖ ٗ٭ا٭ֿ偆םס־ٛم٭ذ٭םס־銨نٚء ˖
阛砯座ײסط٭هֵֿٜףKPJOי⫙⯈氠ך׀ ˖ ┾♣⯁מ⮔ׄגַ ˖ ٗ٭ا٭ס┾♣銨⡑䭥חط٭هٜ✑
䖩 锡 ד ז ג ס ˖ 劄箽溷מ姯ַظ٭ذדׄךעםׂ ˖
겏阛ꇃ瓦סظ٭ذ⟛㲽יֽׂכ⫙⯈氠ך׀י➬⯈ ˖ ⛰յלַֹֹظ٭ذ氠䟨ס־ס陭阛עꓨ锡
겏 阛 ꇃ 瓦 ⟛ 㲽 ْؕ
٭ة Φ Ϧ δ φϧ ͷ ς ʔϒϧ ܈ Redshift ࠷ ऴ త ͳ ू ܭ ݁ Ռ ͷ ς ʔϒϧ ܈ ू ܭ ա ఔ ͷ ς ʔϒϧ ܈ • ৽ ࢀ o r Ϧ ϐʔ λ ʔ • ੈ ৽ ࢀ ɾ Ϧ ϐʔ λ ʔ ผ ͷ K P I Ξ υ ϗ ο Ϋ ू ܭ Ͱ ར ༻
겏 阛 ꇃ 瓦 ظ ٭ ذ ל ֹ
锶 ־ ˖ ✇⪪ꪛظ٭ذכ־ֿ㝕◜ ˖ ┞䍲⪪ꪛכ摾ꬃמ㜟ֻםׂם ˖ ◦䳕䙎ゼ꾴 ˖ 熏כ㴻掾镸廠ؠؙٛםלֿ⻄䨾ך媃ן ˖ ր✇יםַסמ㚷ױגց
ظ ٭ ذ ⪪ ꪛ ס 㕈 勓 䭰 ꓹ
˖ ם؆ך־؆ך궢⮂םַ ˖ 꾗⮂قذ٭٤םל锶嚋״חחյ⮂ס⹌ꈷ ˖ وٞءِٚ٤ءכ⻎ ˖ QVCMJDQSJWBUF❈ַ⮔ׄ ˖ 锶י虘ַסדׄQVCMJDמ ˖ QVCMJDמגظ٭ذע◦䳕䙎מ宜ꏕ
Q V C M J M D ם ط
٭هٜյ Q S J WB U F ם ط ٭هٜ ˖ %#ס⻏⯼疾ꪨכ埫ꮹ陭㴻ס篁ײ⻉ ˖ ׆ס⻏⯼疾ꪨמֵط٭هٜעQVCMJD ˖ ׆סꏕ┫עQSJWBUF ˖ 3FETIJGUדכ ր׆ס⻏⯼疾ꪨסꏕ┫מյ ׆סٗ٭ا٭ֿ✑זגط٭هٜעյ ׆סٞ٭ٜ䭥ח☭ꇖמ锶ֹֻמց כַֹ陭㴻ֿך׀
⪪ ꪛ ظ ٭ ذ ط ٭هٜ ס 陭 阛
˖ ⷃ┞סր⪢ꌃ⪜ցط٭هٜךעםׂյ 㝂俙ס㸯םط٭هٜמ ˖ 偆PSٛم٭ذ٭銨ط٭هٜ ˖ ٗ٭ا٭ס┾♣銨ط٭هٜ ˖ 㸯ַط٭هٜ篁ײ⻉י姯ַ䝠㖥䕑 ˖ ٝإهٞشؠ✑ْؕ٭ة ˖ 劄㸯ⷃ⛺סهٞشؠ⺅䲩ֻ
鏿 겧 ס 갧 㺽 ˖ ⷃ⛺هٞشؠ篁ײ⻉יյ㸴㝕׀ַق٭ص✑ ˖
ٗ٭ا٭ס偆PSٛم٭ذ٭銨ط٭هٜ ˖ ֵ䗎Ⳬֿ偆ٗ٭ا٭מס־ٛم٭ذ٭מ ס־銨ط٭هٜ ˖ 嫘갧溷מ鏿겧םق٭ص篁ײ┪ׅ
ෳ ࡶ ͞ ͷ ֊ Φ Ϧ δ φϧ
ͷ ς ʔϒϧ ܈ Redshift ࠷ ऴ త ͳ ू ܭ ݁ Ռ ͷ ς ʔϒϧ ܈ ج ຊ ଐ ੑ ͷ ς ʔϒϧ ܈ γ ϯ ϓϧ ͳ ύʔ π Λ ἧ ͑Δ ੜ ς ʔϒϧ ܈ Α Γ ෳ ࡶ ͳ σ ʔ λ Λ ੜ
ױ כ ״ ˖ ظ٭ذ겏阛ס塌ⳛ䙎 ˖ ꄫ╚겏阛ط٭هٜ⪪ꪛ ˖ ⪪ꪛط٭هٜס偙ꓹ٬陭阛