Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
雲コンペで反省したノイズ除去
Search
Yuko Ishizaki
November 30, 2019
Technology
1
400
雲コンペで反省したノイズ除去
Yuko Ishizaki
November 30, 2019
Tweet
Share
More Decks by Yuko Ishizaki
See All by Yuko Ishizaki
The Web Conference 2020 Report -多目的最適化における確率的ラベル集約-
ishizaki_yuko
1
1.3k
Meta Kaggleを覗いてみた
ishizaki_yuko
3
2.6k
Hybrid Reward Architecture for Reinforcement Learning
ishizaki_yuko
0
120
Modeling Relational Data with Graph Convolutional Networks
ishizaki_yuko
0
160
Other Decks in Technology
See All in Technology
100 名超が参加した日経グループ横断の競技型 AWS 学習イベント「Nikkei Group AWS GameDay」の紹介/mediajaws202411
nikkei_engineer_recruiting
1
170
ISUCONに強くなるかもしれない日々の過ごしかた/Findy ISUCON 2024-11-14
fujiwara3
8
870
ノーコードデータ分析ツールで体験する時系列データ分析超入門
negi111111
0
410
AWS Media Services 最新サービスアップデート 2024
eijikominami
0
200
オープンソースAIとは何か? --「オープンソースAIの定義 v1.0」詳細解説
shujisado
9
1.1k
Zennのパフォーマンスモニタリングでやっていること
ryosukeigarashi
0
130
New Relicを活用したSREの最初のステップ / NRUG OKINAWA VOL.3
isaoshimizu
2
620
安心してください、日本語使えますよ―Ubuntu日本語Remix提供休止に寄せて― 2024-11-17
nobutomurata
1
1k
サイバーセキュリティと認知バイアス:対策の隙を埋める心理学的アプローチ
shumei_ito
0
390
適材適所の技術選定 〜GraphQL・REST API・tRPC〜 / Optimal Technology Selection
kakehashi
1
680
OCI Security サービス 概要
oracle4engineer
PRO
0
6.5k
テストコード品質を高めるためにMutation Testingライブラリ・Strykerを実戦導入してみた話
ysknsid25
7
2.6k
Featured
See All Featured
Put a Button on it: Removing Barriers to Going Fast.
kastner
59
3.5k
BBQ
matthewcrist
85
9.3k
Gamification - CAS2011
davidbonilla
80
5k
Building an army of robots
kneath
302
43k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
191
16k
Rails Girls Zürich Keynote
gr2m
94
13k
jQuery: Nuts, Bolts and Bling
dougneiner
61
7.5k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
10
720
Scaling GitHub
holman
458
140k
The Invisible Side of Design
smashingmag
298
50k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
4
370
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
26
2.1k
Transcript
雲コンペで反省したノイズ除去 〜 雲コンペ振り返り会 〜 2019/11/30 石崎 裕子
話したいこと 1. 143rd solution ノイズ除去の検証結果を共有したい 2. ノイズ除去の要否の誤ちを共有したい 縦に入っている、光みたいなやつ
143rd solutionのノイズ除去トピック ノイズ除去してスコアが上がった?! モデルは光みたいなノイズに影響を 受けてないのかと思ってた・・・ 早速、検証だ!!
ノイズ除去の仕方 1. グレースケースに変換 (A) 2. 8 x 8 pxごとに標準偏差 5
以下の範囲を背景領域と定義する (Bの白い部分) 3. 28 x 42 pxごとに 2.の背景領域を対象に 1.の画像の値の平均で埋める(C) 4. 3. を平滑化して、これを背景色とする(D) 5. [背景色, 255]の範囲を[0, 255]にスケールし直す A B C D
ノイズ除去の効果 Late Submission して調べてみた Model : U-net Encoder : resnet34
Loss : BCE + Dice Fold : single fold / 5-folds Local Score : 0.64121 -> 0.65080 ( + 0.00959 ) Public LB Score : 0.64030 -> 0.64417 ( + 0.00387 ) Private LB Score : 0.63388 -> 0.64554 ( + 0.01166 ) すんごい上がってる!! やれば良かった・・・
なぜノイズ除去しなかったのか 予測結果の出力から、モデルは光みたいなノイズの影響を 受けていないと判断した 。 ノイズ除去のアルゴリズムを簡単には作れなかった・・・ 複数の光ノイズあり画像の出力を目視確認 ノイズの周りと違いがないように見える
聞きたいこと モデルの出力だけで、ノイズ除去の要否の判断をしていけない? どうすれば、ノイズが影響を受けてるかどうか判断できるのか? 1. とにかく除去してスコアを比較! 2. Grad-Camのようなモデルの解釈性を用いる? 皆さんがどう考えているかを聞きたいです!