Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
Chef*mo: 動画が調理器具を制御して調理を支援するシステムの提案 / Chefmo
Tsubasa Yumura
December 23, 2017
Research
1
980
Chef*mo: 動画が調理器具を制御して調理を支援するシステムの提案 / Chefmo
2017年12月23日(土)にグランフロント大阪で開催されたEC46の発表資料。論文はこちら →
https://goo.gl/6oJHh4
Tsubasa Yumura
December 23, 2017
Tweet
Share
More Decks by Tsubasa Yumura
See All by Tsubasa Yumura
Tinkercadの電子回路シミュレータはいいぞ #北海道まったりLT大会 / Tinkercad
yumu19
1
1.3k
メイカーズ文化とシチズンサイエンス #JOSS2021 / Makers Culture and Citizen Science
yumu19
0
220
バーチャルSNS clusterを用いたイベント開催 / Event Organization with Virtual SNS “cluster”
yumu19
0
64
石川での6年間 / 6 years in Ishikawa
yumu19
0
140
NT札幌2020 in cluster 開催報告 #XRMTG / NT Sapporo 2020 in cluster
yumu19
0
28
Space Apps Challenge Tokyo 2020 開会式
yumu19
0
55
社会人博士のススメ
yumu19
2
5.5k
SpaceApps COVID-19 Challenge開会式
yumu19
0
80
SpaceApps COVID-19 Challenge について
yumu19
0
750
Other Decks in Research
See All in Research
CGO'22 Tutorial Outro
chriscummins
0
440
深層学習を用いた三次元点群処理入門
nnchiba
4
2.5k
Iterative source steering を用いたオンライン補助関数型独立ベクトル分析に基づくブラインド音源分離 / Blind source separation using online auxiliary-function-based independent vector analysis with iterative source steering
taishi
0
140
まだ生態学に本格導入されていない統計的因果推論手法の紹介:傾向スコア、回帰分断デザイン、操作変数法を中心に
takehikoihayashi
2
850
SketchODE: Learning neural sketch representation in continuous time
dasayan05
0
110
車両管理効率化・事故率抑制に向けた連携に関する3者連携協定
koshiba_noriaki
0
110
Winnti is Coming - Evolution after Prosecution@HITCON2021
aragorntseng
0
900
テキストベクトルの重み付けを用いたタスクに対する単語分割の最適化
tathi
1
160
統計・機械学習若手シンポジウム
masakat0
2
1.8k
log4shell注意喚起
connect24h
1
2.2k
MioGatto による数式グラウンディング データセットの構築 / nlp2022
wtsnjp
0
120
CompilerGym CGO 2022 Tutorial Part 2
chriscummins
0
460
Featured
See All Featured
A better future with KSS
kneath
225
15k
How to Ace a Technical Interview
jacobian
265
21k
The Web Native Designer (August 2011)
paulrobertlloyd
74
1.9k
Stop Working from a Prison Cell
hatefulcrawdad
261
17k
Imperfection Machines: The Place of Print at Facebook
scottboms
253
11k
Building Flexible Design Systems
yeseniaperezcruz
310
33k
The Brand Is Dead. Long Live the Brand.
mthomps
45
2.7k
The Art of Programming - Codeland 2020
erikaheidi
31
5.8k
jQuery: Nuts, Bolts and Bling
dougneiner
56
6.4k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
19
1.4k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
315
19k
The Power of CSS Pseudo Elements
geoffreycrofte
46
3.9k
Transcript
Chef mo * ౬ଜ ཌྷ†, ݹؘ ༎ࢠ†, দຊ ՚า‡, ᖒ
ͻ͞Έ†, ܀ݪ Ұو‡ɹ ಈը͕ௐཧث۩Λ੍ޚͯ͠ௐཧΛࢧԉ͢ΔγεςϜͷఏҊ † Chefˎmo ϓϩδΣΫτ ‡ ాक़େֶ ใॲཧֶձ ୈ46ճΤϯλςΠϯϝϯτίϯϐϡʔςΟϯάˏάϥϯϑϩϯτେࡕ
Chef mo * Chefˎmo 2
Chef mo * ຊൃදͷ֓ཁ • ྉཧಈըʹௐཧεΫϦϓτΛຒΊࠐΈɺಈըͷ༰ʹ ߹Θͤͯௐཧث۩Λ੍ޚͯ͠ௐཧࢧԉΛߦ͏γεςϜ ΛఏҊ • ίϯηϓτ࣮Λߦͬͨ
• ಈըͱIoTػثͷ࿈ܞϑϨʔϜϫʔΫsrt.jsΛ༻͍ͨ • ʮ͔͚ΔʯʮࠞͥΔʯʮΔʯͷ3छྨͷௐཧߦಈΛ ࣮ͨ͠ • ٞͱ՝Λ·ͱΊͨ 3
Chef mo * ͡Ίʹ • ྉཧಈը • Ωϡʔϐʔ3ΫοΩϯάʢ1962ʙʣ • 1ྉཧಈըʢKurashiruͳͲʣ
4 [2]kurashiru http://www.kurashiru.com/ ޘָ ࢹௌΛָ͠Ή ެ։Λָ͠Ή ޘָ ࣮ӹ ྉཧʹؔ͢Δ ใΛಘΔ ࣮ӹ ྉཧಈըΛͳͥ؍Δ͔ʁ
Chef mo * ͡Ίʹ • ػցʹΑΔௐཧࢧԉٕज़ͱΈ߹ΘͤΔ͜ͱʹΑΓɺ ྉཧಈըͷࢹௌΛΑΓΑ͍ͷʹঢ՚Ͱ͖ΔͷͰͳ ͍͔ʁ 5 [4]Moley
[6]Cooky
Chef mo * ͡Ίʹ 6 ྉཧಈըͷ ݩͷׂ ௐཧࢧԉ ྟײ ָ͠͞
Chef mo * ಈը͕ௐཧث۩Λ੍ޚͯ͠ௐཧΛࢧԉ͢ΔγεςϜ ޘָ ࢹௌΛָ͠Ή ެ։Λָ͠Ή ޘָ ࣮ӹ ྉཧʹؔ͢Δ ใΛಘΔ ࣮ӹ Chefˎmo Ͱ֦ு
Chef mo * ؔ࿈ݚڀ | ػցʹΑΔௐཧࢧԉ 7 [4]Moley – The
world's first robotic kitchen http://www.moley.com/
Chef mo * ؔ࿈ݚڀ | ػցʹΑΔௐཧࢧԉ 8 [6]Sugiura et al.,
Cooking with robots: designing a household system working in open environments (2010)
Chef mo * ؔ࿈ݚڀ | ϨγϐͱWeb 9 [10]٢ͱٶԼ, άϥϑΟΧϧσʔλϑϩʔʹΑΔ ௐཧϨγϐϓϩάϥϛϯάݴޠͷఏҊ
(2010) [9] RecipeML • Ϩγϐ • ྉཧΛͭ͘ΔͨΊʹඞཁͳࡐྉௐཧํ๏ͳͲͷใΛॻ͖هͨ͠खॱॻ • खॱॻͱ͍͏ಛੑ͔ΒߏԽ͞Εͨهड़ʹ͍͍ͯΔ
Chef mo * ؔ࿈ݚڀ | ϨγϐͱWeb 10 [12]ᬑΒ, smoon: Webͷ࣮ମԽʹΑΔߦಈࢧԉͱͦͷࢼ࡞
(2011)
Chef mo * ؔ࿈ݚڀ | ಈըʹΑΔεΫϦϓτ࣮ߦ 11 [13]܀ݪͱڮຊ, srt.js: ө૾ίϯςϯπͷ
IoT ࢦ֦ு ϓϩάϥϜຒΊࠐΈϑϨʔϜϫʔΫ (2016) • srt.js • srtϑΝΠϧ(ࣈນ)ʹJavaScriptΛهड़࣮ͯ͠ߦ͢ΔϑϨʔϜϫʔΫ • ࠶ੜͨ͠ಈըͷҙͷλΠϛϯάʹ߹ΘͤͯίʔυΛ࣮ߦ
Chef mo * Chefˎmo • ௐཧεΫϦϓτ • ಈըʹ͋ΘͤͨௐཧࢧԉͷखॱΛهࡌ • User
Generated Contents(UGC)ͱͯ͠ͷੜΛఆ • ΩονϯϚωʔδϟ • ֤ՈఉͷΩονϯʹஔ • ௐཧث۩σΟεϓϨΠͳͲͷػثશମΛ౷ׅ 12
Chef mo * Chefˎmo • ௐཧࢧԉͷܗଶ 13
Chef mo * Chefˎmo • ௐཧࢧԉͷ߹͍ 14 ChefˎmoͷλʔήοτྖҬ
Chef mo * ίϯηϓτ࣮ • YouTubeͷطଘௐཧಈըΛ༻ • srt.jsͷϑϨʔϜϫʔΫΛར༻ͯ͠ௐཧεΫϦϓτΛ࣮ߦ • Webmo[16]Λར༻ͯ͠ௐཧث۩Λࣗ࡞
• ʮ͔͚ΔʯʮࠞͥΔʯʮΔʯΛ࣮ • 3ͭͷϢʔεέʔεΛ࣮ࢪ • (a)υϨογϯάΛ͔͚Δ • (b)ཛΛ༹͘ • (c)౾ΛΔ 15
Chef mo * ίϯηϓτ࣮ 16
Chef mo * ίϯηϓτ࣮ 17
Chef mo * ٞ | Chefˎmoͷ׆༻ • λϨϯτΩϟϥΫλʔͷጪґ • ༗໊γΣϑͷௐཧಈը
• ྉཧͷັྗΛߴΊΔߴڃ৯ࡐͷಈըͳͲͷಈը • өըΞχϝͱͷίϥϘϨʔγϣϯͷ࣮ݱ 18 [18]͚ͷϑϨϯζCAFE https://twitter.com/japaricafe_hara/status/929896900525830144
Chef mo * ٞ | ௐཧث۩ • ຊൃදͰWebmo(αʔϘϞʔλ)Λར༻ͯࣗ͠࡞ • API੍ޚͰ͖Δௐཧث۩ࠓޙීٴ͢ΔͰ͋Ζ͏
• ͍··Ͱʹͳ͍ௐཧث۩ͷࣗ࡞·Γͭͭ͋Δ • Maker Faire TokyoͰʮ৯ʯΧςΰϦ͕ઃஔ 19 [22];Γ͔͚ϓϩολ:LunchBot [24]ຊ֨ͩ͠ϝʔΧʔʮBUSHIʯ [25]ΫϨʔϓϩϘοτʮΫϨϓʯ
Chef mo * ٞ | ௐཧεΫϦϓτͷ࡞ • ຊൃදͷίϯηϓτ࣮Ͱsrt.jsʹ࣮ͯߦ͢ΔJavaScriptͰ WebmoͷؔΛهड़ •
جຊతͳௐཧߦಈΛϥΠϒϥϦͱͯ͠ཧ͠ػثͷࠩҟΛٵऩ • Ϩγϐͷղੳߦಈೝ͔ࣝΒௐཧεΫϦϓτͷࣗಈੜ 20 [28]Hashimoto et al., Kusk dataset: Toward a direct understanding of recipe text and human cooking activity (2014)
Chef mo * ٞ | ཧੈքͱಈըͷ༥߹ • ChefˎmoͷޮՌΛߴΊΔͨΊʹཧੈքͱಈըͷ༥߹͕ॏཁ • VR/MR/ARͷ׆༻
• ಈըͱͷଓײ 21 [29]ᬑͱதଜ, WorldConnector: Χϝϥͷମੑ༩ʹΑΔ ө૾ੈքೖΓࠐΉΠϯλϑΣʔε (2014)
Chef mo * ՝ • ௐཧߦಈͷཻ • ଟ͘ͷௐཧߦಈʹલ४උ͕ඞཁ • ྫ͑ʮΔʯͷલʹʮ৯ࡐΛ·ͳ൘ͷ্ʹͷͤΔʯͱ͍
͏४උߦಈ͕͋Δ • ղܾҊ • ௐཧεΫϦϓτৄࡉԽʹΑΔࣗಈԽ • ਓ͕ڠௐͰ͖ΔΑ͏ࢧ࣋ɾ༠ಋ 22
Chef mo * ՝ • ಈըͷ࣌ؒ࣠ͷௐ • طଘͷௐཧಈըਓ͕ࢹௌ͢ΔͨΊʹͭ͘ΒΕ͍ͯ Δ •
ಈըͰෆཁͳ෦লུ͞ΕΔͨΊ࣮ࡍͷௐཧ࣌ ؒΑΓ͍ • ղܾҊ • ௐཧߦಈͷਐḿʹΑΓಈը࠶ੜΛ੍ޚ 23
Chef mo * ·ͱΊ • ಈը͕ௐཧΛࢧԉ͢ΔγεςϜChefˎmoͷίϯηϓτ Λఏএ • Chefˎmoͷ׆༻ํ๏՝ɺՄೳੑʹ͍ͭͯٞΛ· ͱΊͨ
• ௐཧث۩ͷൃలಈըࢹௌελΠϧͷมԽʹΑͬͯ Chefˎmoͷ׆༻໘͕Δ 24