Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
雲コンペで反省したノイズ除去
Search
Yuko Ishizaki
November 30, 2019
Technology
1
410
雲コンペで反省したノイズ除去
Yuko Ishizaki
November 30, 2019
Tweet
Share
More Decks by Yuko Ishizaki
See All by Yuko Ishizaki
The Web Conference 2020 Report -多目的最適化における確率的ラベル集約-
ishizaki_yuko
1
1.4k
Meta Kaggleを覗いてみた
ishizaki_yuko
3
2.8k
Hybrid Reward Architecture for Reinforcement Learning
ishizaki_yuko
0
130
Modeling Relational Data with Graph Convolutional Networks
ishizaki_yuko
0
180
Other Decks in Technology
See All in Technology
All About Sansan – for New Global Engineers
sansan33
PRO
1
1.2k
[SRE NEXT] ARR150億円_エンジニア140名_27チーム_17プロダクトから始めるSLO.pdf
satos
5
3k
Four Keysから始める信頼性の改善 - SRE NEXT 2025
ozakikota
0
420
OpenTelemetryセマンティック規約の恩恵とMackerel APMにおける活用例 / SRE NEXT 2025
mackerelio
3
2k
マルチプロダクト環境におけるSREの役割 / SRE NEXT 2025 lunch session
sugamasao
1
730
ABEMAの本番環境負荷試験への挑戦
mk2taiga
5
1.3k
名刺メーカーDevグループ 紹介資料
sansan33
PRO
0
820
ソフトウェアQAがハードウェアの人になったの
mineo_matsuya
3
200
united airlines ™®️ USA Contact Numbers: Complete 2025 Support Guide
flyunitedhelp
1
470
[SRE NEXT 2025] すみずみまで暖かく照らすあなたの太陽でありたい
carnappopper
2
470
振り返りTransit Gateway ~VPCをいい感じでつなげるために~
masakiokuda
3
210
全部AI、全員Cursor、ドキュメント駆動開発 〜DevinやGeminiも添えて〜
rinchsan
10
5.1k
Featured
See All Featured
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3.3k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
138
34k
KATA
mclloyd
30
14k
Rebuilding a faster, lazier Slack
samanthasiow
83
9.1k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
48
2.9k
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
BBQ
matthewcrist
89
9.7k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
667
120k
Agile that works and the tools we love
rasmusluckow
329
21k
Stop Working from a Prison Cell
hatefulcrawdad
271
21k
Practical Orchestrator
shlominoach
189
11k
Six Lessons from altMBA
skipperchong
28
3.9k
Transcript
雲コンペで反省したノイズ除去 〜 雲コンペ振り返り会 〜 2019/11/30 石崎 裕子
話したいこと 1. 143rd solution ノイズ除去の検証結果を共有したい 2. ノイズ除去の要否の誤ちを共有したい 縦に入っている、光みたいなやつ
143rd solutionのノイズ除去トピック ノイズ除去してスコアが上がった?! モデルは光みたいなノイズに影響を 受けてないのかと思ってた・・・ 早速、検証だ!!
ノイズ除去の仕方 1. グレースケースに変換 (A) 2. 8 x 8 pxごとに標準偏差 5
以下の範囲を背景領域と定義する (Bの白い部分) 3. 28 x 42 pxごとに 2.の背景領域を対象に 1.の画像の値の平均で埋める(C) 4. 3. を平滑化して、これを背景色とする(D) 5. [背景色, 255]の範囲を[0, 255]にスケールし直す A B C D
ノイズ除去の効果 Late Submission して調べてみた Model : U-net Encoder : resnet34
Loss : BCE + Dice Fold : single fold / 5-folds Local Score : 0.64121 -> 0.65080 ( + 0.00959 ) Public LB Score : 0.64030 -> 0.64417 ( + 0.00387 ) Private LB Score : 0.63388 -> 0.64554 ( + 0.01166 ) すんごい上がってる!! やれば良かった・・・
なぜノイズ除去しなかったのか 予測結果の出力から、モデルは光みたいなノイズの影響を 受けていないと判断した 。 ノイズ除去のアルゴリズムを簡単には作れなかった・・・ 複数の光ノイズあり画像の出力を目視確認 ノイズの周りと違いがないように見える
聞きたいこと モデルの出力だけで、ノイズ除去の要否の判断をしていけない? どうすれば、ノイズが影響を受けてるかどうか判断できるのか? 1. とにかく除去してスコアを比較! 2. Grad-Camのようなモデルの解釈性を用いる? 皆さんがどう考えているかを聞きたいです!