Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
雲コンペで反省したノイズ除去
Search
Yuko Ishizaki
November 30, 2019
Technology
1
410
雲コンペで反省したノイズ除去
Yuko Ishizaki
November 30, 2019
Tweet
Share
More Decks by Yuko Ishizaki
See All by Yuko Ishizaki
The Web Conference 2020 Report -多目的最適化における確率的ラベル集約-
ishizaki_yuko
1
1.4k
Meta Kaggleを覗いてみた
ishizaki_yuko
3
2.8k
Hybrid Reward Architecture for Reinforcement Learning
ishizaki_yuko
0
130
Modeling Relational Data with Graph Convolutional Networks
ishizaki_yuko
0
180
Other Decks in Technology
See All in Technology
工業高校で学習したとあるエンジニアのキャリアの話
shirayanagiryuji
0
120
夏休みWebアプリパフォーマンス相談室/web-app-performance-on-radio
hachi_eiji
1
260
Amazon Q と『音楽』-ゲーム音楽もAmazonQで作成してみた感想-
senseofunity129
0
170
Amazon Bedrock AgentCoreのフロントエンドを探す旅 (Next.js編)
kmiya84377
1
160
Claude Codeは仕様駆動の夢を見ない
gotalab555
23
7.1k
LLM時代の検索とコンテキストエンジニアリング
shibuiwilliam
0
120
20250807 Applied Engineer Open House
sakana_ai
PRO
2
590
生成AI活用のROI、どう測る? DMM.com 開発責任者から学ぶ「AI効果検証のノウハウ」 / ROI of AI
i35_267
4
130
Infrastructure as Prompt実装記 〜Bedrock AgentCoreで作る自然言語インフラエージェント〜
yusukeshimizu
1
160
【OptimizationNight】数理最適化のラストワンマイルとしてのUIUX
brainpadpr
2
540
意志の力が9割。アニメから学ぶAI時代のこれから。
endohizumi
1
110
AIに目を奪われすぎて、周りの困っている人間が見えなくなっていませんか?
cap120
1
700
Featured
See All Featured
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
110
20k
Building a Scalable Design System with Sketch
lauravandoore
462
33k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
48
9.6k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
23
1.4k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
333
22k
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
656
60k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.4k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
3k
The Pragmatic Product Professional
lauravandoore
36
6.8k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
46
7.6k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
9
770
Building Flexible Design Systems
yeseniaperezcruz
328
39k
Transcript
雲コンペで反省したノイズ除去 〜 雲コンペ振り返り会 〜 2019/11/30 石崎 裕子
話したいこと 1. 143rd solution ノイズ除去の検証結果を共有したい 2. ノイズ除去の要否の誤ちを共有したい 縦に入っている、光みたいなやつ
143rd solutionのノイズ除去トピック ノイズ除去してスコアが上がった?! モデルは光みたいなノイズに影響を 受けてないのかと思ってた・・・ 早速、検証だ!!
ノイズ除去の仕方 1. グレースケースに変換 (A) 2. 8 x 8 pxごとに標準偏差 5
以下の範囲を背景領域と定義する (Bの白い部分) 3. 28 x 42 pxごとに 2.の背景領域を対象に 1.の画像の値の平均で埋める(C) 4. 3. を平滑化して、これを背景色とする(D) 5. [背景色, 255]の範囲を[0, 255]にスケールし直す A B C D
ノイズ除去の効果 Late Submission して調べてみた Model : U-net Encoder : resnet34
Loss : BCE + Dice Fold : single fold / 5-folds Local Score : 0.64121 -> 0.65080 ( + 0.00959 ) Public LB Score : 0.64030 -> 0.64417 ( + 0.00387 ) Private LB Score : 0.63388 -> 0.64554 ( + 0.01166 ) すんごい上がってる!! やれば良かった・・・
なぜノイズ除去しなかったのか 予測結果の出力から、モデルは光みたいなノイズの影響を 受けていないと判断した 。 ノイズ除去のアルゴリズムを簡単には作れなかった・・・ 複数の光ノイズあり画像の出力を目視確認 ノイズの周りと違いがないように見える
聞きたいこと モデルの出力だけで、ノイズ除去の要否の判断をしていけない? どうすれば、ノイズが影響を受けてるかどうか判断できるのか? 1. とにかく除去してスコアを比較! 2. Grad-Camのようなモデルの解釈性を用いる? 皆さんがどう考えているかを聞きたいです!