Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
雲コンペで反省したノイズ除去
Search
Yuko Ishizaki
November 30, 2019
Technology
1
420
雲コンペで反省したノイズ除去
Yuko Ishizaki
November 30, 2019
Tweet
Share
More Decks by Yuko Ishizaki
See All by Yuko Ishizaki
The Web Conference 2020 Report -多目的最適化における確率的ラベル集約-
ishizaki_yuko
1
1.4k
Meta Kaggleを覗いてみた
ishizaki_yuko
3
2.9k
Hybrid Reward Architecture for Reinforcement Learning
ishizaki_yuko
0
140
Modeling Relational Data with Graph Convolutional Networks
ishizaki_yuko
0
200
Other Decks in Technology
See All in Technology
Qiita Bash アドカレ LT #1
okaru
0
190
The Engineer with a Three-Year Cycle
e99h2121
0
150
善意の活動は、なぜ続かなくなるのか ーふりかえりが"構造を変える判断"になった半年間ー
matsukurou
0
590
Master Dataグループ紹介資料
sansan33
PRO
1
4.2k
Introduction to Sansan, inc / Sansan Global Development Center, Inc.
sansan33
PRO
0
2.9k
CQRS/ESになぜアクターモデルが必要なのか
j5ik2o
0
1.3k
名刺メーカーDevグループ 紹介資料
sansan33
PRO
0
1k
Models vs Bounded Contexts for Domain Modularizati...
ewolff
0
210
かわいい身体と声を持つ そういうものに私はなりたい
yoshimura_datam
0
150
マーケットプレイス版Oracle WebCenter Content For OCI
oracle4engineer
PRO
5
1.5k
Java 25に至る道
skrb
3
230
習慣とAIと環境 — 技術探求を続ける3つの鍵
azukiazusa1
2
650
Featured
See All Featured
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
287
14k
Max Prin - Stacking Signals: How International SEO Comes Together (And Falls Apart)
techseoconnect
PRO
0
67
Game over? The fight for quality and originality in the time of robots
wayneb77
1
83
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
133
19k
The Cost Of JavaScript in 2023
addyosmani
55
9.4k
Everyday Curiosity
cassininazir
0
120
Building Better People: How to give real-time feedback that sticks.
wjessup
370
20k
Navigating the moral maze — ethical principles for Al-driven product design
skipperchong
1
230
Dealing with People You Can't Stand - Big Design 2015
cassininazir
367
27k
For a Future-Friendly Web
brad_frost
180
10k
コードの90%をAIが書く世界で何が待っているのか / What awaits us in a world where 90% of the code is written by AI
rkaga
58
41k
Leveraging LLMs for student feedback in introductory data science courses - posit::conf(2025)
minecr
0
120
Transcript
雲コンペで反省したノイズ除去 〜 雲コンペ振り返り会 〜 2019/11/30 石崎 裕子
話したいこと 1. 143rd solution ノイズ除去の検証結果を共有したい 2. ノイズ除去の要否の誤ちを共有したい 縦に入っている、光みたいなやつ
143rd solutionのノイズ除去トピック ノイズ除去してスコアが上がった?! モデルは光みたいなノイズに影響を 受けてないのかと思ってた・・・ 早速、検証だ!!
ノイズ除去の仕方 1. グレースケースに変換 (A) 2. 8 x 8 pxごとに標準偏差 5
以下の範囲を背景領域と定義する (Bの白い部分) 3. 28 x 42 pxごとに 2.の背景領域を対象に 1.の画像の値の平均で埋める(C) 4. 3. を平滑化して、これを背景色とする(D) 5. [背景色, 255]の範囲を[0, 255]にスケールし直す A B C D
ノイズ除去の効果 Late Submission して調べてみた Model : U-net Encoder : resnet34
Loss : BCE + Dice Fold : single fold / 5-folds Local Score : 0.64121 -> 0.65080 ( + 0.00959 ) Public LB Score : 0.64030 -> 0.64417 ( + 0.00387 ) Private LB Score : 0.63388 -> 0.64554 ( + 0.01166 ) すんごい上がってる!! やれば良かった・・・
なぜノイズ除去しなかったのか 予測結果の出力から、モデルは光みたいなノイズの影響を 受けていないと判断した 。 ノイズ除去のアルゴリズムを簡単には作れなかった・・・ 複数の光ノイズあり画像の出力を目視確認 ノイズの周りと違いがないように見える
聞きたいこと モデルの出力だけで、ノイズ除去の要否の判断をしていけない? どうすれば、ノイズが影響を受けてるかどうか判断できるのか? 1. とにかく除去してスコアを比較! 2. Grad-Camのようなモデルの解釈性を用いる? 皆さんがどう考えているかを聞きたいです!