Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
図面からの母材形状認識 - 【ABEJA × CADDi】Computer Visionのビジネス活用を考える
Search
[email protected]
March 07, 2022
Technology
0
1.6k
図面からの母材形状認識 - 【ABEJA × CADDi】Computer Visionのビジネス活用を考える
[email protected]
March 07, 2022
Tweet
Share
More Decks by
[email protected]
See All by
[email protected]
CADDi 会社紹介・採用説明資料
caddi_eng
11
660k
エンジニア向け会社紹介資料
caddi_eng
14
200k
機械学習チームのモノレポ移行
caddi_eng
0
290
BtoB SaaS を支える 認証認可基盤の設計
caddi_eng
0
640
2023.01_CADDi Thailand Company Overview
caddi_eng
0
14k
Company Overview for Engineers (English)
caddi_eng
0
14k
20220826_Company Briefing Online Event
caddi_eng
0
400
OpenSearchで実現する画像検索とテスト追加で目指す安定運用
caddi_eng
3
5.8k
製造業向け新事業の基盤をエンジニア1人のチームでローコード&マネージドで半年で立ち上げた話_220810
caddi_eng
0
920
Other Decks in Technology
See All in Technology
Go1.21から導入された Go Toolchainの仕組みをまるっと解説
yamatoya
12
3k
生成AIの活用方法 - 2024年現在、 結局どのように使えばいいのだろうか? / How to use Generative AI in 2024
nttcom
8
2.4k
AWS Control Towerと HashiCorp Terraformでいい感じにマルチアカウント管理をしよう
chazuke4649
0
430
Cleanup handling in Go / Go Conference 2024
k1low
6
2.1k
情報の世界 2024年度 第10回「データとセンシングの概要」 #情報の世界 / Data and Sensing 2024
yumulab
0
160
go get で考慮している ファイルシステムの挙動について
shinnosuke_kishida
3
620
Platform Orchestrators: The Missing Middle of Internal Developer Platforms?
syntasso
1
170
C / C++ - language
pohjus
1
250
Oracle Base Database Service 技術詳細
oracle4engineer
PRO
5
40k
Extending kotlin-inject for fun & profit
vrallev
2
200
オブザーバビリティ勉強会で模擬障害対応をやってみた
leveragestech
1
360
NAB Show 2024 動画技術関連レポート/ NAB Show 2024 Report
cyberagentdevelopers
PRO
3
240
Featured
See All Featured
It's Worth the Effort
3n
180
27k
Clear Off the Table
cherdarchuk
87
310k
The World Runs on Bad Software
bkeepers
PRO
62
9k
WebSockets: Embracing the real-time Web
robhawkes
59
7.1k
How to name files
jennybc
66
94k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
247
20k
GitHub's CSS Performance
jonrohan
1025
450k
Optimising Largest Contentful Paint
csswizardry
14
2.5k
How GitHub Uses GitHub to Build GitHub
holman
471
290k
Principles of Awesome APIs and How to Build Them.
keavy
122
16k
Navigating Team Friction
lara
180
13k
Making Projects Easy
brettharned
110
5.6k
Transcript
図面からの母材形状認識 #ABEJAxCADDi 竹原大智
図面からの母材形状認識 本発表で話すこと • 母材形状認識とは • 図面?母材形状?何の役に立つ? • 母材形状認識をCNNでやってみた 話せないこと •
認識結果の実例の詳細など... (扱ってい るデータの機密性が高いため) Copyright 2017-2021 CADDi Inc. All rights reserved. 1 図面 母材形状:丸棒
キャディについて
SERVICE FEATURE 産業・市場構造の中でキャディが目指すものは個々の加工会社が強みを 最大限活かすことができるフラットな市場構造です マッチング(のみ行う) マッチングだけでは 探索コストが減るだけで
交渉・監督コストはそのまま ファブレスメーカー (的立ち位置) 商流に入ることで発注者・ 受注者の取引コスト・ 製造コストを下げる 図面データ アップロード・ 送付 2 ・調達工数削減 ・コスト削減 ・安定価格、納期 発注者 ・見積レス ・論理的原価計算 ・売上安定化 最適 加工会社に 確定発注 自動製造原価計算・ 見積提示 1 検査・品質保証 製品納入 3 CADDi 発注者 MERIT MERIT
母材形状認識とは?
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 5 加工前の材料の形状
• 完成品から逆算して選択される 完成品 母材 旋盤加工
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 6 加工前の材料の形状
• 完成品から逆算して選択される • 今回は板金加工と機械加工(フライス・旋盤)を含む10種類の母材が対象 母材形状の一例
母材形状とは Copyright 2017-2021 CADDi Inc. All rights reserved. 7 加工前の材料の形状
• 完成品から逆算して選択される • 今回は板金加工と機械加工(フライス・旋盤)を含む10種類の母材が対象 母材形状から制作される部品の一例
母材形状認識 図面(画像)から母材形状を読み取る • 多クラス分類(10クラス) • 今回は複数の母材を含む組図などは対象としていない Copyright 2017-2021 CADDi Inc.
All rights reserved. 8 図面 母材形状:丸棒
母材形状認識ができると何が嬉しい? Copyright 2017-2021 CADDi Inc. All rights reserved. 9 図面から読み取られた母材形状の情報がプロダクトで活用されている
• 受発注業務 • 図面管理SaaS
母材形状認識ができると何が嬉しい? Copyright 2017-2021 CADDi Inc. All rights reserved. 10 図面から読み取られた母材形状の情報がプロダクトで活用されている
• 受発注業務 • 図面管理SaaS
母材形状認識のための取り組み
母材形状認識をCNNで Copyright 2017-2021 CADDi Inc. All rights reserved. 12 図面
母材形状:丸棒 CNN
図面画像 • 画像サイズが大きい(1辺が3000 ~ 4000 px くらいが多い) • 発注者による図面の書き方や質 の違いが大きい
• 手書きのスキャンなどノイジーなも のも多い Copyright 2017-2021 CADDi Inc. All rights reserved. 13 丸棒 平鋼板 板金 板金
前処理 Copyright 2017-2021 CADDi Inc. All rights reserved. 14 •
テーブル・外枠除去 • Augmentation(学習時のみ) テーブル・外枠除去
前処理 Copyright 2017-2021 CADDi Inc. All rights reserved. 15 •
テーブル・外枠除去 • Augmentation (学習のみ) • Transpose(p=0.5) • HorizontalFlip(p=0.5) • VerticalFlip(p=0.5) • ShiftScaleRotate(p=0.5)
データセット 学習データ • 自社での受発注業務を通して正解データが貯まる • 母材形状によっては少ないものもある • 数千図面ある母材、数十図面しかない母材 Copyright 2017-2021
CADDi Inc. All rights reserved. 16
モデル・学習 データ分割: Stratified K-fold 画像サイズ: 1024 x 1024 pixel 前処理:
テーブル・外枠除去, Augumentation モデル: EfficientNet-B0 with FC Layer 損失関数: Cross Entropy Loss with label smoothing (0.05) Copyright 2017-2021 CADDi Inc. All rights reserved. 17
結果
認識精度 検証データ • 母材形状毎にバランス良く用意したもの • 顧客ごとの評価用セット 分類正解率 • 10クラス分類で8.5~9割程度 •
信頼度が高いもの(半数程度)のみなどであれば9.5割程度 Copyright 2017-2021 CADDi Inc. All rights reserved. 19
認識精度 誤分類パターン • 母材が似ているもの • 〜棒 ↔ パイプ、など • ノイジーなもの
• 発注者による図面の書き方や質の違い が大きい、結果として発注者毎の精度 のブレもある Copyright 2017-2021 CADDi Inc. All rights reserved. 20
認識精度 Copyright 2017-2021 CADDi Inc. All rights reserved. 21 六角形の断面図も図面がノイジーだと丸
みたいになってたりする 誤分類パターン • 母材が似ているもの • 〜棒 ↔ パイプ • ノイジーなもの • 発注者による図面の書き方や質の違い が大きい、結果として発注者毎の精度 のブレもある • 関連する発表: 図面をデノイジングする 技術について
まとめ
図面の母材形状認識について話しました • CNNにより図面から母材形状を読み取る • 初期検証の結果としては上々!現在プロダクトで活用する諸々の準備中 Copyright 2017-2021 CADDi Inc. All
rights reserved. 23 図面 母材形状:丸棒 CNN
We are hiring!! 「キャディ エンジニア採用」で検索!