吉岡研究室紹介(2026年度）

Transcript

1. 吉岡研究室紹介 2026年度VER
2. 自己紹介 ・2014 Graduate@Keio Univ. ・2014-2021 Toshiba Research ・2017-2018 Stanford Visiting Scholar @Mark Horwitz Group ・2021-Keio Univ. Assistant Prof. Keio CSG PI https://sites.google.com/keio.jp/keio-csg/ Slide 2
3. ビジョン インテリジェントセンシングで 社会にインパクトを いままで： ◦ あるものを観測し、見たままに人間に報告する 目指す姿： ◦ センシング結果から機械自らが認識・判断 ◦ SFの世界を実現するのは僕ら！
4. ビジョン インテリジェントセンシング（フィジカルAI） いままで：あるものを観測し、見たままに人間に報告する 目指す姿：センシング結果から情報を認識、そして機械自らが判断 “脳” “目” 自動運転 物流、産業 ヘルスケア
5. 研究テーマ “脳”としての次世代のエッジコンピューティング “目”としての3Dセンシング AI・通信 ソフトウェア 回路 3Dセンシング 電子デバイス・半導体 ハードウェア 吉岡研のフォーカス ハードとソフトを”繋ぐ”研究 ハードとソフト、両方わかる人材になりませんか
6. 研究テーマ 集積回路チーム 3Dセンサチーム ディープラーニング、LLM用アクセラレータ研究 自動運転センサのセキュリティ研究 AI用データセンターの電力は地球上電力の10%に達する →それを劇的に減らす回路技術を生み出せないか？ 自動運転には3Dセンサ（LiDAR）が必須だが、センサを 騙す攻撃が研究されている。 →自動運転システムを守るにはどうしたらよいか？ [Image credit] Waymo, Robosense
7. 研究テーマ 集積回路チーム 3Dセンサチーム セキュアLiDAR研究 どのようなLiDARのハードウェア/信号処理をすれば自動運転を守れるか？ 回路＋信号処理＋ディープラーニングをあわせた新しいセンサ設計の研究 [Image credit] Waymo, Robosense
8. 国家プロジェクトワークショップ@YIL
9. 次世代のエッジコンピューティング ◼エッジコンピューティングの時代へ ◆サーバ処理に対しプライバシー・遅延・電力効率に優れる ◼iPhone Neural Engine（機械学習の専用回路) ◆限られたバッテリー容量で最大限のAI処理 より高効率なAI専用回路が必要 Apple A14チップ図 https://www.itmedia.co.jp/pcuser/articles/2009/17/news133_2.html Tier4社自動運転システム
10. Computing-in-memory型プロセッサ ◼AI演算ではデータ移動のコストが支配的！ ◆メモリ→プロセッサへのデータ移動 ◼メモリと演算を同じ回路で実行すれば・・？ ◆データ移動なしで超効率化が可能！ ◆Computing In-Memory (CIM)
11. Computing-in-memory型プロセッサ ◼吉岡研ではComputing-in-memory回路の新たな構造を探求 ◼ChatGPTでも活用されているTransformerも実行可能な新規構造を提案 →半導体のオリンピック、ISSCC’24に採択 ◼顕著性(saliency）を活用した新規構造 ◆国際学会、ASP-DAC’24に採択 [Yoshioka, ISSCC’24]
12. LLMを、チップ1枚で動かす ChatGPTのようなAIを、スマホの電池で動かせるか？ • LLMの重みを −1・0・+1 の3値（1.58bit）に圧縮 メモリの中で直接計算し、外部メモリへのアクセスを43.6%削減 • 熱のゆらぎを計算に使う「熱力学コンピュータ」 CMOSチップとして世界で初めて実現、電力効率1000倍 • 回路とAIの両方を自分で設計する PyTorchで学習 → 回路設計 → 試作チップを測定 学生の成果 張（D）：BitROM → ASP-DAC’26 Excellent Student Author Award 菅原（M）：世界初のCMOS熱力学計算チップ → SSDM’26（卒論テーマ）
13. フィジカルAIセキュリティ ◼アメリカ（一部）では自動運転が一般的に利用可能に ◆しかしセキュリティ的な問題はつきまとう ◼サンフランシスコの “三角コーン”攻撃 ⚫車は人が乗ったと誤認識し、 動けなくなってしまう ⚫Cruise車が被害に https://www.bbc.com/news/technology-66611513
14. 3Dセンシング：センサ幻惑 センサへの攻撃で自動運転システムを騙す新たなセキュリティ危機 ◦ 特に中核的センサであるLiDARの脆弱性を突き 任意座標に虚偽データを注入するセンサ幻惑攻撃は重大な脅威 ◦ University of California Irvineと共同研究 実車点群 虚偽データ LiDAR 攻撃レーザ センサ幻惑攻撃 任意座標 虚偽データ注入 急ブレーキ誘発 搭乗者負傷 事件を未然に防ぐためセンサセキュリティ研究が必要
15. LiDARとセンサ幻惑原理 ◼ LiDARは対象物に反射したレーザが帰還するまでの光の飛行時間より 距離を測定するToF(Time-of-Flight)方式で動作 ◆センサ幻惑はレーザパルスを特定タイミングで打ち込むことで虚偽データ注入 ⚫受光素子を使用しLiDARレーザタイミングと同期 センサ幻惑システム LiDAR LiDAR 同期用受光素子 レーザ レーザ 受光素子 攻撃レーザ レーザ レーザ ToF 受光素子 ToF 計測 受光素子 攻撃レーザ打ち込み ToF 受光素子 ToF 計測
16. センサ幻惑実験システム立ち上げ ◼ 従来よりも数10倍高い攻撃性能＋消失型攻撃を実験実証 ◆先行研究は注入点数が少ない前提；根本からセンサ幻惑対策を見直す必要性 ◆セキュリティトップ国際学会に採択(NDSS)！ ⚫これを守るにはどうしたらよいか？防御の研究中！ 実験系比較 センサ幻惑実例： 攻撃レーザ＋ドライバ 被攻撃LiDAR Cao, CCS2019 Ours 注入 点数 120 6000 消失 点数 N.A. 3000 集光 素子 なし あり ドライ バ なし カスタム ロゴマーク注入
17. 3Dセンシング：スポーツ解析 ◼プロバスケチームの行動・位置解析にLiDARセンサを活用する研究 ◆実際のプロの練習などデータ取得、学会発表 ◆青木研、アイシンと共同研究
18. ロボットのAIを、ライト1つで騙す ロボットの“頭脳”になりつつあるAIは、照明に弱い？ • 言葉で動くロボットAI（VLA）が急速に普及 Vision-Language-Action モデル • スポットライトを当てるだけで作業成功率が0%に AIの中身を知らなくても攻撃できる • よくある対策の落とし穴を発見 「色を無視するAI」になってしまう → 色を保つ防御を提案 学生の成果 渡辺（M）：CoRL’26 採択（ロボット学習のトップ会議）
19. LiDARの“捨てていた光”をAIで読む LiDARが受け取る“光の波形”を、まるごとAIに渡したら？ • 普通のLiDARは反射光のピーク1点しか使わない 波形の残りの情報は捨てられている • 波形全体（Full-waveform）をAIで解析 ガラスの映り込み「ゴースト」の除去、妨害攻撃下での点群復元 • 世界初の大規模データセットを構築・公開 従来の約100倍の規模 学生の成果 吉田（M）：NeurIPS’26 採択・MIRU優秀学生賞 池田（D）：NeurIPS’26・CVPR’26 採択（ソニー・五十川研と共同）
20. 集積回路の国際学会：ISSCC 聴衆：3000人 慶應から世界へ • 国際学会で発表しよう！ – 競合相手はMIT、スタンフォード、インテル、 Googleなど – 慶應の学生のポテンシャルと教員の熱意 で彼らに負けない研究をしましょう！
21. 学生が主役の研究室 2021年発足。論文の第一著者も、受賞も、学生 32 本 学生が第一著者の 国際会議発表 12 本 学生が第一著者の 国際論文誌 11 件 学生の受賞 （国際学会6件） 24 名 在籍メンバー （D4・M10・B4 5） 学部生・修士でも、第一著者として世界のトップ会議に挑戦 NeurIPS・CVPR・ICCV・CoRL・NDSS・IEEE JSSC などに採択 ※2022年以降・HP掲載業績より集計（ポスター/デモ、共同第一著者、訪問・共同指導学生を含む）。教員の東芝時代は含まず
22. 学生の受賞 学部生・修士でも学会で継続的に受賞しています 年 受賞者 賞 2026 松野（M） dlab-VDEC デザインアワード 優秀賞 2026 吉田（M） MIRU 優秀学生賞 2026 張（D） ASP-DAC Excellent Student Author Award 2026 佐古（D）ほか VehicleSec Best Demo Award 2026 池田（D） 自動車工学会賞 2026 渡辺（M） 電気学術奨励賞 2026 菅原（M） 理工学部賞・卒業論文賞 2025 張（D） PAKDD Best Paper Award（採択率25%） 2025 李（D） IEEE ICCE-Asia Best Poster Award 2023 山下（D） IEEE CICC Outstanding Student Paper Award 2023 速川・鈴木(M) VehicleSec Best Short/WIP Paper Runner-up 青字＝国際学会
23. 学生が世界のトップ会議へ AI・ビジョン ロボティクス セキュリティ 集積回路 NeurIPS’26 ×2 CVPR’26 ICCV’25 PAKDD’25 CoRL’26 IROS’26 ×2 ICRA’25 RA-L’25 NDSS’24 / ’25 IEEE JSSC’24 / ’25 ESSERC’25 ICCAD’24 ASP-DAC’24 / ’26 （採択率15%） VehicleSec ’23–’26 （Best Paper） 学年に関係なくチャンスがあります 修士で NeurIPS・CoRL に採択（吉田・渡辺） 卒論テーマのチップで SSDM に採択（菅原）
24. チップを自分で設計して作る 回路を設計 工場で試作 数ヶ月後に （TSMCの支援） チップが届く 自分で測定 国際学会・ 論文誌へ 試作プロセス 学生のチップ成果 65nm / 28nm 12nm FinFET 菅原（M）：世界初のCMOS熱力学コンピューティングチップ TSMCの支援あり 65nm・電力効率1000倍 → SSDM’26 安藤（D）：顕著性を検知するアナログCIM 4541 TOPS/W → ESSERC’25 張（D）：1.58bit LLM向け メモリ内演算チップ 65nm → IEEE TCAS-I’26 山下：12nm FinFET 高速・極低温ADC → IEEE JSSC’25
25. 世界・企業とつながる研究 海外の大学 企業 国内の大学・機関 UC Irvine（NDSS・ICRA） U. Florida（CCS・VehicleSec） ソニー / ソニーセミコンダクタ ソリューションズ（CVPR’26） 東大・京大・早稲田・電通大・ 静岡大 南京大・東南大から訪問学生 アイシン（バスケLiDAR） 産総研・岡山大病院 留学生メンバーも在籍 TSMC（チップ試作） 学内：五十川研・青木研 大型研究費：JST CREST×2・さきがけ・ASPIRE・次世代エッジAI半導体 など → 試作費も学会渡航費も心配なく メディア：日経クロステック・IEEE Spectrum・EE Times・自動運転ラボ 「慶応の学生ら、走行中の自動運転センサーを無効化」
26. 卒業生の進路 Princeton University Ph.D.進学 ダイヘン ソニー ソニーセミコンダクタ ソリューションズ 日産自動車 AWS Sansan 日立 ハードとソフト、両方わかる人材として 半導体・エレクトロニクス・自動車・IT・アカデミアで活躍中 海外の大学院への進学も（Princeton Ph.D.）
27. 吉岡研に向いている人 • 吉岡研の研究内容に興味・好奇心がある – 特にハードとソフトの両方に興味・好奇心がある • センシング・コンピューティングの土台はハードウェア • ハードの知識は就職後も必ず役立ちます – 国際学会とか面白そう – 若い先生とワイワイやりたい – いろいろな大学と関わる共同研究面白そう • 必要でないこと – 回路、機械学習、プログラミングの知識 – 配属後に研修で勉強します
28. 研究室活動について • コアタイムなし – 時間で管理はせず自主性に任せます – 一日平均7-8時間研究を行うことを期待します • 3月～7月は新人研修を予定 • 資料作成・発表・回路、機械学習の基礎を輪講ベースで勉強 • 8月～卒論研究をスタート
29. 研究室活動について • 週１のグループミーティング – みんなのスケジュールに合わせ日時決定 • Kaggle部 – Kaggleでプログラミング、機械学習スキルを鍛えよう – 今年の戦績は.. • NFLコンペ: 7位/940 金メダル（吉岡） • Google手話コンペ 15位/1100 銀メダル（吉岡） • インクコンペ 40位/1200 銀メダル（学生）
30. 先輩の声 ◼この研究室を選んだ理由はなんですか？ ◆立ち上げたばかりの研究室ということもあって、活気に満ちていると感じたから ◆比較的新しい研究室で、これまでの研究テーマや伝統にとらわれずに自由に挑戦できると感じ たため ◆自律走行、センシングに興味があり、しかもハードとソフト両方できそうだったため ◆ハードとソフトのどっちも扱っていた、研究室が大きかった、やる気のある生徒がいた ◆ハードウェアとソフトウェアの両方を触ることができる唯一の研究室だったから ◆研究テーマが面白そうだったから、ハードとソフト両方を学べるから、対面で会う機会が他の研 究室に比べて多いので仲は深まる、先生や雰囲気が良かった
31. 先輩の声 ◼研究室生活で印象に残っていること・楽しいことは何ですか？ ◆議論の最中に良いアイデアが浮かんだ時/海外の研究者と交流できる点 ◆メンバー全員が国際学会や論文誌を目指していること ◆国際会議の発表、吉岡先生以外にも一流の研究者と出会えたこと ◆海外の学会発表、仲間との議論。優秀な先輩との議論は興味深く、自分もこうなりたいと思わ せるものがある ◆We went to VLSI meeting and had beer at night, people talked about interesting stuff. ◆研究に関する相談とダーツ ◆京都に学会発表を聞きに行ったこと、飲み会
32. 先輩の声 ◼研究室での経験が将来どのように役立つと思いますか？ ◆問題解決能力、なんとかする力 ◆自分で考えて行動する力が身についた ◆プレゼンテーション能力、課題に対する向き合い方、知的なタフさ ◆マネジメント能力。自分のプロジェクトを進めるのに人を巻き込む必要があり、スケジューリング などを自分で率先する必要がある環境なのでその能力が身につくだろう。 ◆プレゼンや資料作り、英語での日常会話 ◆実験プロセスを考え、結果を分析し、考察する力はどの仕事でも役立つと思う。 メンバーと協力する場面が多く、コミュニケーション能力を培うことができ、仕事で役立つと思う。
33. もう少し詳しく話しませんか？ https://sites.google.com/keio.jp/keio-csg/ 吉岡研HPの見学フォームを送ろう！ B3へのメッセージ..のページにあります。 研究室説明会： 10/21 15:30- 10/23 15:0010/28 15:3011/4 15:30途中退席OK。気軽にどうぞ
34. 研究環境 • ノートパソコン、ディスプレイ等支給 • 3Dセンサ – LiDAR >8台、3Dカメラ10台 • 機械学習環境 – 現在GPUワークステーション*3台 • 回路設計環境 – 先端CMOSプロセスの試作（TSMC 28nm/65nm） – 設計サーバー導入済