Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
雲コンペで反省したノイズ除去
Search
Yuko Ishizaki
November 30, 2019
Technology
1
410
雲コンペで反省したノイズ除去
Yuko Ishizaki
November 30, 2019
Tweet
Share
More Decks by Yuko Ishizaki
See All by Yuko Ishizaki
The Web Conference 2020 Report -多目的最適化における確率的ラベル集約-
ishizaki_yuko
1
1.4k
Meta Kaggleを覗いてみた
ishizaki_yuko
3
2.8k
Hybrid Reward Architecture for Reinforcement Learning
ishizaki_yuko
0
130
Modeling Relational Data with Graph Convolutional Networks
ishizaki_yuko
0
180
Other Decks in Technology
See All in Technology
american airlines®️ USA Contact Numbers: Complete 2025 Support Guide
supportflight
1
110
KubeCon + CloudNativeCon Japan 2025 Recap by CA
ponkio_o
PRO
0
300
SmartNewsにおける 1000+ノード規模 K8s基盤 でのコスト最適化 – Spot・Gravitonの大規模導入への挑戦
vsanna2
0
130
関数型プログラミングで 「脳がバグる」を乗り越える
manabeai
1
190
整頓のジレンマとの戦い〜Tidy First?で振り返る事業とキャリアの歩み〜/Fighting the tidiness dilemma〜Business and Career Milestones Reflected on in Tidy First?〜
bitkey
2
16k
「クラウドコスト絶対削減」を支える技術—FinOpsを超えた徹底的なクラウドコスト削減の実践論
delta_tech
4
170
fukabori.fm 出張版: 売上高617億円と高稼働率を陰で支えた社内ツール開発のあれこれ話 / 20250704 Yoshimasa Iwase & Tomoo Morikawa
shift_evolve
PRO
2
7.6k
生まれ変わった AWS Security Hub (Preview) を紹介 #reInforce_osaka / reInforce New Security Hub
masahirokawahara
0
470
Getting to Know Your Legacy (System) with AI-Driven Software Archeology (WeAreDevelopers World Congress 2025)
feststelltaste
1
130
KiCadでPad on Viaの基板作ってみた
iotengineer22
0
300
Glacierだからってコストあきらめてない? / JAWS Meet Glacier Cost
taishin
1
160
AIの全社活用を推進するための安全なレールを敷いた話
shoheimitani
2
510
Featured
See All Featured
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
Into the Great Unknown - MozCon
thekraken
40
1.9k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
10
950
Gamification - CAS2011
davidbonilla
81
5.4k
The Invisible Side of Design
smashingmag
301
51k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
The Power of CSS Pseudo Elements
geoffreycrofte
77
5.9k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
50
5.5k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
31
1.3k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
8
820
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
3.9k
Transcript
雲コンペで反省したノイズ除去 〜 雲コンペ振り返り会 〜 2019/11/30 石崎 裕子
話したいこと 1. 143rd solution ノイズ除去の検証結果を共有したい 2. ノイズ除去の要否の誤ちを共有したい 縦に入っている、光みたいなやつ
143rd solutionのノイズ除去トピック ノイズ除去してスコアが上がった?! モデルは光みたいなノイズに影響を 受けてないのかと思ってた・・・ 早速、検証だ!!
ノイズ除去の仕方 1. グレースケースに変換 (A) 2. 8 x 8 pxごとに標準偏差 5
以下の範囲を背景領域と定義する (Bの白い部分) 3. 28 x 42 pxごとに 2.の背景領域を対象に 1.の画像の値の平均で埋める(C) 4. 3. を平滑化して、これを背景色とする(D) 5. [背景色, 255]の範囲を[0, 255]にスケールし直す A B C D
ノイズ除去の効果 Late Submission して調べてみた Model : U-net Encoder : resnet34
Loss : BCE + Dice Fold : single fold / 5-folds Local Score : 0.64121 -> 0.65080 ( + 0.00959 ) Public LB Score : 0.64030 -> 0.64417 ( + 0.00387 ) Private LB Score : 0.63388 -> 0.64554 ( + 0.01166 ) すんごい上がってる!! やれば良かった・・・
なぜノイズ除去しなかったのか 予測結果の出力から、モデルは光みたいなノイズの影響を 受けていないと判断した 。 ノイズ除去のアルゴリズムを簡単には作れなかった・・・ 複数の光ノイズあり画像の出力を目視確認 ノイズの周りと違いがないように見える
聞きたいこと モデルの出力だけで、ノイズ除去の要否の判断をしていけない? どうすれば、ノイズが影響を受けてるかどうか判断できるのか? 1. とにかく除去してスコアを比較! 2. Grad-Camのようなモデルの解釈性を用いる? 皆さんがどう考えているかを聞きたいです!