GANの医療への応用

Transcript

1. GANの医療への応用
2. GAN(Generative Adversarial Network)とは？ - 機械学習の手法の一つ。GANは「2つのニューラルネットワーク(生成器/識別器)を 互いに競わせて入力の学習を深めていく」Image credit: Thalles Silva
3. GANの使用例 Ming-Yu Liu, Thomas Breuel, and Jan Kautz. Unsupervised image-to-image translation networks. CoRR, abs/1703.00848, 2017.
4. GANの使用例
5. GANの使用例 https://thispersondoesnotexist.com/
6. GANを医療分野へ - Low Dose CT Denoising(低線量CTノイズ除去) - Segmentation - Detection(検知) - Medical Image Synthesis(医療画像合成) - Reconstruction - Classification - Registration
7. Segmentation P. Moeskops, M. Veta, M. W. Lafarge, K. A. Eppenhof, and J. P. Pluim,‘‘Adversarial training and dilated convolutions for brain MRI segmentation,’’ in Deep Learning in Medical Image Analysis and Multimodal Learning for Clinical Decision Support. Cham, Switzerland: Springer,2017, pp. 56–64 - 概要: リアルなセグメンテーション画像をGANで生成して学習する
8. Segmentation
10. Detection 概要: 前立腺超音波画像のランドマークの検知をGANによって行った Tuysuzoglu, A., Tan, J., Eissa, K., Kiraly, A.P., Diallo, M., Kamen, A., 2018. Deep adversarial context-aware landmark detection for ultrasound imaging. arXiv preprint arXiv:1805.10737 .
11. Detection
12. Detection
13. Medical Image Synthesis - 概要: MRI画像から患者のCT画像を生成する Nie, D., Trullo, R., Lian, J., Petitjean, C., Ruan, S., Wang, Q., Shen, D., 2017. Medical image synthesis with context-aware generative adversarial networks, in: International Conference on Medical Image Computing and Computer-Assisted Intervention, Springer. pp. 417–425.
14. Medical Image Synthesis
15. Medical Image Synthesis
16. 結論 - データ不足問題がある獣医療分野の研究でGANは一つのソリューションじゃない かなと思う - 欠点は計算量
17. 出典 - List of the GAN for medical imaging - Adversarial training and dilated convolutions for brain MRI segmentation