Slide 1

Slide 1 text

No content

Slide 2

Slide 2 text

ࢁޱޫଠ 3FTFBSDI.BOBHFS $ZCFS"HFOU"*-BC

Slide 3

Slide 3 text

w ݚڀઓུ w ΫϦΤΠςΟϒݚڀνʔϜ͕໨ࢦ͢΋ͷ w ϕΫλάϥϑΟοΫε΁ͷ௅ઓ w ࠷ۙͷݚڀ੒Ռ w ςΩετͷϕΫλ࠶ߏ੒ w σβΠϯςϯϓϨʔτͷࣗಈੜ੒ w ϢʔβʔʹΑΔϨΠΞ΢τੜ੒ͷ੍ޚ "HFOEB

Slide 4

Slide 4 text

w ಈը޿ࠂɺόφʔ޿ࠂɺݕࡧ࿈ಈܕ޿ࠂͳͲͷ ͋ΒΏΔදݱ෺ ΫϦΤΠςΟϒ ʘ഑৴֦େதʂʂʗɹΠϯϑΟʔυܕ޿ࠂ αϯϓϧςΩετͰ͢ʂ ΠϯϑΟʔυ޿ࠂ ΠϯϑΟʔυܕ޿ࠂαϯϓϧςΩ ετͰ͢ʂ ΠϯϑΟʔυ޿ࠂ ޿ࠂओϩΰ

Slide 5

Slide 5 text

w αʔϏε։ൃ͔Βಠཱͯ͠ݚڀ։ൃ w ػցֶशɺը૾ೝࣝɺࣗવݴޠॲཧɺԻ੠৴߸ॲཧ "*-BCΫϦΤΠςΟϒݚڀνʔϜ ޿ࠂޮՌͷ༧ଌ ੍࡞ͷࢧԉ

Slide 6

Slide 6 text

w େن໛ͳࣾ಺σʔλΛ࢖ͬͨػցֶशϞσϧ ݚڀࣄྫɿ޿ࠂޮՌͷ༧ଌ ML model ʘ഑৴֦େதʂʂʗɹΠϯϑΟʔυܕ޿ࠂ αϯϓϧςΩετͰ͢ʂ ΠϯϑΟʔυ޿ࠂ ΠϯϑΟʔυܕ޿ࠂαϯϓϧςΩ ετͰ͢ʂ ΠϯϑΟʔυ޿ࠂ ޿ࠂओϩΰ Good?

Slide 7

Slide 7 text

w ޿ࠂޮՌΛࣄલ༧ଌ͢Δ͜ͱͰʮউͯΔʯΫϦΤΠςΟϒ͚ͩΛ੍࡞ ͜Ε·ͰͷαʔϏεల։ "*Ͱ޿ࠂΫϦΤΠςΟϒ੍࡞ΛҰมɺใु͸޿ࠂޮՌ͕ Ͱͨ࣌ͷΈͷྉۚମܥʮۃ༧ଌ"*ʯͷఏڙΛ։࢝ XXXDZCFSBHFOUDPKQOFXTEFUBJMJE "*Ͱ਺ԯΩʔϫʔυͷ඼࣭είΞΛࣗಈͰվળɹޮՌͷग़ ͤΔ޿ࠂςΩετΛࣗಈੜ੒ʮۃ༧ଌ5%ʯͷఏڙΛ։࢝ XXXDZCFSBHFOUDPKQOFXTEFUBJMJE

Slide 8

Slide 8 text

ࣗಈͰΫϦΤΠςΟϒΛ࡞Γ͍ͨ

Slide 9

Slide 9 text

w ۙ೥ͷը૾ੜ੒͸΄ͱΜͲϥελܗࣜ ը૾ͷࣗಈੜ੒ͷݱࡏ 72("/<&TTFS>$-*1<3BEGPSE>ʹΑΓੜ੒ Bananas sold in the market

Slide 10

Slide 10 text

Typography Typography Typography ϥελܗࣜ w σΟεϓϨΠϑΥʔϚοτ w +1&(ɺ1/(ɺ8FC1 w ϐΫηϧͷ഑ྻʹΑΔը૾දݱ w ղ૾౓ݻఆɺฤूࠔ೉ ϕΫλܗࣜ w ΫϦΤΠςΟϒ੍࡞ϑΥʔϚοτ w 47(ɺ1%'ɺ1PXFS1PJOU w υΩϡϝϯτߏ଄هड़ʹΑΔը૾දݱ w ղ૾౓ඇґଘɺฤू༰қ

Slide 11

Slide 11 text

w ϕΫλܗࣜͷը૾ੜ੒ٕज़ "*-BC͕໨ࢦࣗ͢ಈੜ੒ ! ! ! ! … ! … ML model ղ૾౓ඇґଘɺ࠶ฤूՄೳ

Slide 12

Slide 12 text

ςΩετͷϕΫλ࠶ߏ੒ 4IJNPEB )BSBHVDIJ 6DIJEB :BNBHVDIJ *$$7 ۝भେֶͱͷڞಉݚڀ

Slide 13

Slide 13 text

ςΩετͷϕΫλ࠶ߏ੒ Resolution: [1699, 1280] Location: [247, 1130, !!!!!!!!!! 748, 1280] Text: "WANT" Font: Barlow Semi Condensed ExtraBold Fill: ! RGB: [44, 34, 41] Border: ! Visible: True ! RGB: [217, 91, 97] ! Width: 2 Shadow: ! Visible: False Background: ϥελը૾ ϕΫλදݱ ςΩετฤू ελΠϧฤू

Slide 14

Slide 14 text

w طଘσβΠϯͷ࠶ར༻ɾΞηοτԽ w ഑৴͞ΕͯҰ౓ݶΓͩͬͨΫϦΤΠςΟϒ͕ࢿ࢈ʹ w ޮՌͷߴ͍ΫϦΤΠςΟϒͷ࠶ݱ w ϥελԽ͞ΕͨσβΠϯͷඍௐ੔ w ղ૾౓ʹґଘ͠ͳ͍ฤू͕Մೳʹ ϕΫλ࠶ߏ੒͕Մೳʹ͢ΔϫʔΫϑϩʔ

Slide 15

Slide 15 text

w ςΩετͷݕग़ͱೝࣝʢ0$3 w Ͳ͜ʹςΩετ͕͋Γ·͔͢ w ͳΜͱॻ͔Ε͍ͯ·͔͢ w ελΠϧͷೝࣝ w ͲΜͳϑΥϯτͰ͔͢ w Կ৭Ͱ͔͢ w Ө΍ԑऔΓ͸͍͍ͭͯ·͔͢ w എܠͷਪఆ w ςΩετͷޙΖ͸Ͳ͏ͳ͍ͬͯ·͔͢ʁ ϕΫλԽ΁ͷ̏ͭͷ՝୊

Slide 16

Slide 16 text

Feedforward inference ςΩετ࠶ߏ੒Ϟσϧ Resolution: [1699, 1280] Location: [247, 1130, !!!!!!!!!! 748, 1280] Text: "WANT" Font: Barlow Semi Condensed ExtraBold Fill: ! RGB: [44, 34, 41] Border: ! Visible: True ! RGB: [217, 91, 97] ! Width: 2 Shadow: ! Visible: False Background: OCR Font style Inpaint Feedback refinement Differentiable rendering

Slide 17

Slide 17 text

ϥελը૾ ࠶ߏ੒ը૾ #PPLDPWFSEBUBTFU<*XBOB>

Slide 18

Slide 18 text

No content

Slide 19

Slide 19 text

'&&%ࣗಈঝೝ"*ͰͷαʔϏεల։ "*ʹΑͬͯ(PPHMFγϣοϐϯά޿ࠂʹ͓͚Δঝೝ཰ͷେ෯վળΛਤΔαʔ Ϗεʮ'&&%ࣗಈঝೝ"*ʯΛ։ൃɾఏڙ։࢝ IUUQTXXXDZCFSBHFOUDPKQOFXTEFUBJMJE

Slide 20

Slide 20 text

σβΠϯςϯϓϨʔτͷ ࣗಈੜ੒ :BNBHVDIJ *$$7

Slide 21

Slide 21 text

w ௚઀ϕΫλܗࣜͰੜ੒͢ΔػցֶशϞσϧ σβΠϯςϯϓϨʔτͷࣗಈੜ੒ CanvasVAE

Slide 22

Slide 22 text

w σβΠφʔʹΑΔ࠶ฤू͕Մೳ w ແݶʹੜ੒͞ΕΔσβΠϯςϯϓϨʔτ w ղ૾౓ʹґଘ͠ͳ͍ը૾ੜ੒ ϕΫλܗࣜͰͷςϯϓϨʔτੜ੒ ! ! ! ! … ! …

Slide 23

Slide 23 text

ϕΫλܗࣜͷυΩϡϝϯτ Canvas Image Text Text Text Text Canvas Image Text Text Text Text άϥϑΟοΫ υΩϡϝϯτ Ωϟϯόε ཁૉྻ

Slide 24

Slide 24 text

$BOWBT7"&υΩϡϝϯτੜ੒Ϟσϧ ϚϧνϞʔμϧͳߏ଄త7"& Canvas Image Text Text Text Text Canvas Image Text Text Text Text CanvasVAE Z Encoder Decoder

Slide 25

Slide 25 text

ϥϯμϜੜ੒͞ΕͨσβΠϯ !"#!!"# !" !"#!!"# !"#!! !" !"#! !"#! !"#! ! !"# !"#! !" !"#! !"# !" !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! !"# !"#! !"#! ! !"#! !"#! !"# !"#! !"#! !"#! ! !"#! !"#! ! !"# !"# !"#! ! !"#! !"#! !"# !"#! !"#! !"# ! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !" !"#! !"#! !"#! !"# !"#! ! !"#! !" !"#! !"#! !"#! !"# !"#!!" !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! !"# !" !" !"# !"#! !"# ! ! ! !" !"#! !"#

Slide 26

Slide 26 text

σβΠϯςϯϓϨʔτͷ಺ૠ !"#$%&' !"#$%&( )*+,"-%.$+%/,"& ( )*+,"-%.$+%/,"& ' !"%*.#,01%/," !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! ! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! ! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"# !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !" !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"#! !"# !"#! !"#! !"#! !"#! !"# ೋͭͷσβΠϯͷؒΛऔͬͨΒʁ

Slide 27

Slide 27 text

w ݪཧతʹੜ੒͕Ͱ͖Δ͜ͱΛ࣮ূ w طଘݚڀʹυΩϡϝϯτੜ੒ख๏͸ଘࡏ͠ͳ͍ w ࣮༻Խʹ޲͚ͯͷ՝୊ w େن໛ͳάϥϑΟοΫσβΠϯͷσʔληοτߏங w Ϟσϧߏ଄ͷվળ ࣗಈੜ੒ͷݱࡏͱల๬

Slide 28

Slide 28 text

ϢʔβʔʹΑΔ ϨΠΞ΢τੜ੒ͷ੍ޚ ,JLVDIJ 4JNP4FSSB 0UBOJ :BNBHVDIJ "$... ૣҴాେֶڞಉݚڀ

Slide 29

Slide 29 text

w ࣗಈੜ੒ʹ஫จΛ͚ͭΔʹ͸ʁ ϨΠΞ΢τੜ੒ͷ੍ޚ Canvas Image Text Text Text Text ΋ͬͱ্ʹಈ͔͍ͨ͠ ྡͷςΩετͱἧ͍͑ͨ ML model

Slide 30

Slide 30 text

w ϨΠΞ΢τੜ੒ϞσϧΛֶश $-(-0੍໿෇͖࠷దԽʹΑΔੜ੒੍ޚ LayoutGAN++ Generator Z ॳظੜ੒ ϨΠΞ΢τ

Slide 31

Slide 31 text

w ϢʔβʔͷࢦࣔΛຬͨ͢Α͏ʹਪ࿦࣌ʹ࠷దԽ $-(-0੍໿෇͖࠷దԽʹΑΔੜ੒੍ޚ LayoutGAN++ Generator Z ੍໿৚݅ • Alignment • Overlap • Element x is top • … ॳظੜ੒ ϨΠΞ΢τ ࠷దԽࡁ ϨΠΞ΢τ

Slide 32

Slide 32 text

19 Generation w/ Beautification Constraints Initial Optimized Initial Optimized Initial Optimized Alignment Non-overlap ഑ஔΛ੔͑Δ࠷దԽ

Slide 33

Slide 33 text

20 Generation w/ Relational Constraints Initial Optimized Initial Optimized ཁૉͷฒͼΛ࠷దԽ

Slide 34

Slide 34 text

w ࣗಈੜ੒͚ͩͰ͸඼࣭ͷ୲อ͕೉͍͠ w ਓͱ"*Ͱڠௐ͢ΔϫʔΫϑϩʔ w ࢦࣔʹରͯ͠ʮͦΕͬΆ͘ʯฤूͯ͘͠ΕΔ"* w ؒҧ͍ͬͯͯ΋ϕΫλܗࣜͳͷͰ༰қʹਓ͕ฤूՄೳ w όφʔ΍ϥϯσΟϯάϖʔδ੍࡞΁ͷԠ༻ ࣗಈੜ੒ͱਓؒͷڠௐ

Slide 35

Slide 35 text

͜Ε͔ΒͷΫϦΤΠςΟϒ Λࢧ͑Δٕज़

Slide 36

Slide 36 text

w ࣄલ൚ԽֶशͱԼྲྀλεΫ w େن໛σʔλ͔Β࡞ΒΕΔ൚༻ػցֶशϞσϧ w (15<#SPXO> $-*1<3BEGPSE> w தখن໛σʔλͰͷλʔήοτλεΫԠ༻ w ϚϧνϞʔμϧϞσϧͷڵོ w 5SBOTGPSNFSΞʔΩςΫνϟ w ը૾ɺςΩετɺԻڹɺςʔϒϧͳͲΛ౷Ұͯ͠هड़ ࠷ۙͷݚڀτϨϯυ

Slide 37

Slide 37 text

w େن໛ΫϦΤΠςΟϒσʔλʹΑΔ൚༻Ϟσϧ w ޮՌ༧ଌ͔Β੍࡞ࢧԉ·Ͱ࢖͑Δࣄલֶशج൫ w େن໛ࣾ಺஝ੵσʔλΛ࠷େݶʹ׆༻ w ϕΫλʔάϥϑΟοΫߏ଄ͷͨΊͷػցֶश w ΫϦΤΠςΟϒ͸ϚϧνϞʔμϧͳߏ଄σʔλ ΫϦΤΠςΟϒٕज़ͷڧԽઓུ

Slide 38

Slide 38 text

ݚڀ։ൃͷΠϯύΫτ࠷େԽ Research Developers Business Creators 1P$Λ௨ͨ͠৽ٕज़࣮૷ ৽ٕज़ʹΑΔαʔϏεల։ "*ࢧԉʹΑΔѹ౗తͳੜ࢈ੑ

Slide 39

Slide 39 text

͓ΘΓʹ ΫϦΤΠςΟϒࣗಈੜ੒ʹ޲͚ͨݚڀ։ൃ ςΩετ࠶ߏ੒ɺςϯϓϨʔτੜ੒ɺϨΠΞ΢τ੍ޚ ਓͱ"*͕ڠௐ͢Δ੍࡞ϫʔΫϑϩʔ ୭΋͕༰қʹޮՌͷߴ͍ΫϦΤΠςΟϒΛ੍࡞͢Δੈք΁