Slide 1

Slide 1 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 1/xx サマリ • 参加コンペ: – Competition Detail - Solafune • 概要: – 衛星画像の超解像(5倍) • 学習データ3000枚程度。評価データ400枚程度 • 順位: – 10位/34チーム • 参加94人だから難易度ちょい高めかも? • 基本アプローチ概要: – モデル:SwinIR • Augmentation:Rot90,HueSaturationValue、 RGBshift,channelshuffle,Flip – 備考:モデルを5倍に改造してフルスクラッチ学習。画像は全部利用。 • 役割 – ファシリテーター(勉強会のメンバのサポート) • 所感: – イイ感じに進行できた。 • モデル選定、コンペのレベル感含め。 • サーベイの仕方、実装の部分。 – 実装したかったけど、時間が無くできなかった手法があるのが悔しい • Cutblur、TTA – 私のレベルもさらに上げて、勉強会の質をさらに上げていきたい。 – 短期間だったがメンバが頑張ってくれた。ありがとうございます!! – CVPR併設の、画質改善系のワークショップであるNTIREの存在を 知れたのはでかい! コンペ 概要 結果 縦横x5

Slide 2

Slide 2 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 2/xx ValidationのSSIMヒスト SSIMの数値ヒスト 著しく性能が低い画像がそこそこあり。 このあたりがピークなのは、 5倍だとどうしてもテクスチャが消えてしまうため。 提出画像↓ べったり塗りつぶしのよう。

Slide 3

Slide 3 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 3/xx 入力画像 真値 超解像結果 入力画像 真値 超解像結果 苦手シーン① テクスチャが細かいシーン で過強調となってしまう。 苦手シーン② ①と同様。過強調 になってしまう。

Slide 4

Slide 4 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 4/xx 過強調を抑えるAugmentation、cutblur(時間が足りず未実装) • Cutblur:超解像タスクにおける最適なData Augmentationとは? | AI-SCHOLAR | AI:(人工知能)論文・技術情報メディア

Slide 5

Slide 5 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 5/xx CVPR併設の画質改善系の学会NTIRE 2022調査 • プレゼン – https://data.vision.ee.ethz.ch/cvl/ntire22/slides/Lugmayr_NTIRE22_SRSpace_Present ation.pdf • ポスター – Lugmayr_NTIRE22_SRSpace_Poster.pdf (ethz.ch) • まとめ? – andreas128/NTIRE22_Learning_SR_Space (github.com) • 所感: – SRFlow使いたかったけど商用NG。 – 超解像も大きく分けて4種もあるのはびっくり • SRFLOW, GAN, VAE, IMLE

Slide 6

Slide 6 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 6/xx NTIRE 2022調査

Slide 7

Slide 7 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 7/xx

Slide 8

Slide 8 text

Platform Technology Division Copyright 2020 Sony Semiconductor Solutions Corporation DATE 8/xx 解法リンク • 【solafune:5x Super-resolution of Satellite Images】private 2nd - Qiita • Solafune 超解像度化コンペ(5倍)3位解法 - Qiita • [solafune] 衛星画像の5倍超解像度化 (for OSS) の解法 (zenn.dev) •