Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
図面からの母材形状認識 - 【ABEJA × CADDi】Computer Visionのビジネス活用を考える
Search
[email protected]
March 07, 2022
Technology
0
1.5k
図面からの母材形状認識 - 【ABEJA × CADDi】Computer Visionのビジネス活用を考える
[email protected]
March 07, 2022
Tweet
Share
More Decks by
[email protected]
See All by
[email protected]
エンジニア向け会社紹介資料
caddi_eng
14
180k
CADDi 会社紹介・採用説明資料
caddi_eng
10
620k
機械学習チームのモノレポ移行
caddi_eng
0
240
BtoB SaaS を支える 認証認可基盤の設計
caddi_eng
0
520
2023.01_CADDi Thailand Company Overview
caddi_eng
0
14k
Company Overview for Engineers (English)
caddi_eng
0
14k
20220826_Company Briefing Online Event
caddi_eng
0
380
OpenSearchで実現する画像検索とテスト追加で目指す安定運用
caddi_eng
3
5.7k
製造業向け新事業の基盤をエンジニア1人のチームでローコード&マネージドで半年で立ち上げた話_220810
caddi_eng
0
870
Other Decks in Technology
See All in Technology
複雑な構成要素を持つUIとの向き合い方 〜新・支出グラフでの実例〜 / B43 TECH TALK
nakamuuu
0
140
Azure Container Apps + Bicep 〜 こんな感じで運用しています
kaz29
2
480
元インフラエンジニアに成る / Human Resources to Human Relations
bobtani
4
920
KubeConにproposalを送りたい人へのアドバイス
sat
PRO
3
260
データベース02: データベースの概念
trycycle
0
160
DevOpsメトリクスとアウトカムの接続にトライ!開発プロセスを通して計測できるメトリクスの活用方法
ham0215
2
240
20240418_Google ColabにLLMが搭載されたようなのでPython x データ分析の勉強方法を考えてみる
doradora09
0
140
Tellus の衛星データを見てみよう #mf_fukuoka
kongmingstrap
0
210
私が trocco を推す理由
__allllllllez__
1
240
Python と Snowflake はズッ友だょ!~ Snowflake の Python 関連機能をふりかえる ~
__allllllllez__
1
120
障害対応をちょっとずつよくしていくための 演習の作りかた
heleeen
0
230
Kernel MemoryでAzure OpenAI Serviceとお手軽データソース連携
mitsuzono
1
260
Featured
See All Featured
Six Lessons from altMBA
skipperchong
21
3k
In The Pink: A Labor of Love
frogandcode
138
21k
Writing Fast Ruby
sferik
621
60k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
6
1.5k
Designing Experiences People Love
moore
136
23k
Making Projects Easy
brettharned
108
5.5k
The Power of CSS Pseudo Elements
geoffreycrofte
60
5k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
14
1.5k
Designing for humans not robots
tammielis
248
25k
Large-scale JavaScript Application Architecture
addyosmani
504
110k
Optimizing for Happiness
mojombo
370
69k
Bash Introduction
62gerente
604
210k
Transcript
図面からの母材形状認識 #ABEJAxCADDi 竹原大智
図面からの母材形状認識 本発表で話すこと • 母材形状認識とは • 図面?母材形状?何の役に立つ? • 母材形状認識をCNNでやってみた 話せないこと •
認識結果の実例の詳細など... (扱ってい るデータの機密性が高いため) Copyright 2017-2021 CADDi Inc. All rights reserved. 1 図面 母材形状:丸棒
キャディについて
SERVICE FEATURE 産業・市場構造の中でキャディが目指すものは個々の加工会社が強みを 最大限活かすことができるフラットな市場構造です マッチング(のみ行う) マッチングだけでは 探索コストが減るだけで
交渉・監督コストはそのまま ファブレスメーカー (的立ち位置) 商流に入ることで発注者・ 受注者の取引コスト・ 製造コストを下げる 図面データ アップロード・ 送付 2 ・調達工数削減 ・コスト削減 ・安定価格、納期 発注者 ・見積レス ・論理的原価計算 ・売上安定化 最適 加工会社に 確定発注 自動製造原価計算・ 見積提示 1 検査・品質保証 製品納入 3 CADDi 発注者 MERIT MERIT
母材形状認識とは?
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 5 加工前の材料の形状
• 完成品から逆算して選択される 完成品 母材 旋盤加工
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 6 加工前の材料の形状
• 完成品から逆算して選択される • 今回は板金加工と機械加工(フライス・旋盤)を含む10種類の母材が対象 母材形状の一例
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 7 加工前の材料の形状
• 完成品から逆算して選択される • 今回は板金加工と機械加工(フライス・旋盤)を含む10種類の母材が対象 母材形状から制作される部品の一例
母材形状認識 図面(画像)から母材形状を読み取る • 多クラス分類(10クラス) • 今回は複数の母材を含む組図などは対象としていない Copyright 2017-2021 CADDi Inc.
All rights reserved. 8 図面 母材形状:丸棒
母材形状認識ができると何が嬉しい? Copyright 2017-2021 CADDi Inc. All rights reserved. 9 図面から読み取られた母材形状の情報がプロダクトで活用されている
• 受発注業務 • 図面管理SaaS
母材形状認識ができると何が嬉しい? Copyright 2017-2021 CADDi Inc. All rights reserved. 10 図面から読み取られた母材形状の情報がプロダクトで活用されている
• 受発注業務 • 図面管理SaaS
母材形状認識のための取り組み
母材形状認識をCNNで Copyright 2017-2021 CADDi Inc. All rights reserved. 12 図面
母材形状:丸棒 CNN
図面画像 • 画像サイズが大きい(1辺が3000 ~ 4000 px くらいが多い) • 発注者による図面の書き方や質 の違いが大きい
• 手書きのスキャンなどノイジーなも のも多い Copyright 2017-2021 CADDi Inc. All rights reserved. 13 丸棒 平鋼板 板金 板金
前処理 Copyright 2017-2021 CADDi Inc. All rights reserved. 14 •
テーブル・外枠除去 • Augmentation(学習時のみ) テーブル・外枠除去
前処理 Copyright 2017-2021 CADDi Inc. All rights reserved. 15 •
テーブル・外枠除去 • Augmentation (学習のみ) • Transpose(p=0.5) • HorizontalFlip(p=0.5) • VerticalFlip(p=0.5) • ShiftScaleRotate(p=0.5)
データセット 学習データ • 自社での受発注業務を通して正解データが貯まる • 母材形状によっては少ないものもある • 数千図面ある母材、数十図面しかない母材 Copyright 2017-2021
CADDi Inc. All rights reserved. 16
モデル・学習 データ分割: Stratified K-fold 画像サイズ: 1024 x 1024 pixel 前処理:
テーブル・外枠除去, Augumentation モデル: EfficientNet-B0 with FC Layer 損失関数: Cross Entropy Loss with label smoothing (0.05) Copyright 2017-2021 CADDi Inc. All rights reserved. 17
結果
認識精度 検証データ • 母材形状毎にバランス良く用意したもの • 顧客ごとの評価用セット 分類正解率 • 10クラス分類で8.5~9割程度 •
信頼度が高いもの(半数程度)のみなどであれば9.5割程度 Copyright 2017-2021 CADDi Inc. All rights reserved. 19
認識精度 誤分類パターン • 母材が似ているもの • 〜棒 ↔ パイプ、など • ノイジーなもの
• 発注者による図面の書き方や質の違い が大きい、結果として発注者毎の精度 のブレもある Copyright 2017-2021 CADDi Inc. All rights reserved. 20
認識精度 Copyright 2017-2021 CADDi Inc. All rights reserved. 21 六角形の断面図も図面がノイジーだと丸
みたいになってたりする 誤分類パターン • 母材が似ているもの • 〜棒 ↔ パイプ • ノイジーなもの • 発注者による図面の書き方や質の違い が大きい、結果として発注者毎の精度 のブレもある • 関連する発表: 図面をデノイジングする 技術について
まとめ
図面の母材形状認識について話しました • CNNにより図面から母材形状を読み取る • 初期検証の結果としては上々!現在プロダクトで活用する諸々の準備中 Copyright 2017-2021 CADDi Inc. All
rights reserved. 23 図面 母材形状:丸棒 CNN
We are hiring!! 「キャディ エンジニア採用」で検索!