身体を持ったパーソナルAIエージェントの 可能性を探る開発

Transcript

1. 身体を持ったパーソナルAIエージェントの 可能性を探る開発 2026/3/12
2. Profile 名前： Naoki Yokomachi / 横町 直樹 Twitter： yoko／@_cityside ロール： ソフトウェアエンジニア AI駆動開発エバンジェリスト AWS Community Builders 2026 所属： KDDIアジャイル開発センター株式会社
3. パーソナルAIエージェントはいいぞ みんなで作って見せ合おう 今日伝えたいこと 今日伝えたいこと
4. Agenda デモ エージェント開発のはじまり ベースの構成 パーソナルAIエージェントに向けた開発方針 UIの改善 ツールの拡充 接触回数を増やすための工夫 開発中、開発予定の機能
5. デモ デモ
6. エージェント開発のはじまり エージェント開発のはじまり 3週間前、KAG主催の ランチ タ イムL T週 間に 向 け て サンプルのエージェ ントを 作 ろ うかな ー と思 っ てい た
7. エージェント開発のはじまり エージェント開発のはじまり
8. AITuber Ki t https://github.com/tegnike/aituber-kit ・AIキャラクターチャットボットツールキット ・Next. j s製 ・Li ve2D／VRMをサポート ・TTS（合成音声） ・Youtube配信やスライド発表などの拡張機能も 当時の構成（フロントエンド） 当時の構成（フロントエンド）
9. エージェントのキャラ付け （香水店員） AWS製エージェントフレームワーク 「Strands Agents」 サーバレスエージェントプラットフォーム 「Amazon Bedrock AgentCore」 + 当時の構成（エージェント） 当時の構成（エージェント） 知識やツール （ユーザーの好みの参照、香水DBの操作）
10. 当時の構成（インフラ） 当時の構成（インフラ） フロントエンド・BFF → Vercel エージェント・バックエンド → AWS
11. 沼にはまり始める 沼にはまり始める LT終了後、なんとなくWeb検索ツールをつなげてみる →なんか妙に生き生きとして見える…！ →以前から考えていたパーソナルAIエージェントを作るなら今じゃないか？
12. 時を同じくして 時を同じくして これ 👇が流行り始めて個人用エージェントの機運が高まっていたのもある
13. 開発方針 開発方針 とにかく接触回数を増やす
14. 1 . AIエージ ェン トが 生 活でど こ までな に がで き る の か？ 　 使い方の幅や新しい 発 想を探 り たい 2 . 長期記憶を長期に運 用した ら どうな る の か？ どこまで自分のこと を理解 し てくれ る の か？ 開発方針 開発方針 とにかく接触回数を増やす
15. ・Windows PC, Macbook, iPhone用に画面を調整 ・縦モニターにも対応 ・UIも使いたくなるように少しずつ改善 ・PWAに対応してワンボタンでアクセス ・開きっぱなしでも眩しくないようにダークモードを実装 どの端末からでもアクセスしたいのでWebアプリは継続 どの端末からでもアクセスしたいのでWebアプリは継続
16. ・ポモドーロタイマー：基本機能だけ ・タスクリスト：UIからはもちろんエージェントからも操作可能 最近作業に使っていたポモドーロタイマーの要素を取り入れる 最近作業に使っていたポモドーロタイマーの要素を取り入れる i n s p r i r e d b y 『 C h i l l w i t h Y o u : L o -F i S t o r y 』
17. ・Gmail／Googleカレンダー ・Notion とりあえず普段使うツールをつなげてみる とりあえず普段使うツールをつなげてみる →ツールの間に介在して 　ユーザーのリクエストを柔軟に解釈してツールを操作してくれるように 例 １ ） W e b で レ シ ピ を 検 索 → U R L を N o t i o n に 保 存 → 買 い 物 リ ス ト を N o t i o n に 保 存 → タ ス ク リ ス ト に 買 い 物 タ ス ク を 追 加 例 ２ ） 未 読 メ ー ル を チ ェ ッ ク → A W S か ら の 要 対 応 メ ー ル （ 英 語 ） を 要 約 → 対 応 内 容 を タ ス ク に 追 加 → カ レ ン ダ ー に 対 応 予 定 を 追 加
18. ・毎日のニュース通知 ・ブリーフィングコマンド ・日記機能 →朝起きたらとりあえずニュース見る 　仕事前のブリーフィング 　一日の終わりに日記をつける そのほか接触回数を増やす工夫 そのほか接触回数を増やす工夫 例 ） 「 ブ リ ー フ ィ ン グお願い」 で 以 下 を 一 発 で 実施 し て 報告 未読メールの検索 重要度の高いものをピックアップ 今日明日のカレンダー予定をピックアップ 期限の近いタスクのチェック カード会社のメールから今週分の支出を計算 今日の天気
19. ・ウェイクワード検知＆音声入力 そのほか接触回数を増やす工夫 そのほか接触回数を増やす工夫 ウ ェ イ ク ワ ー ド 検 知 → P i c o v o ic e 社 P o r c u p in e 「 ト ナ リ （ T O N a R i ） 」 で カ ス タ ム ウ ェ イ ク ワ ー ド の モ デ ル を 作 成 ※結構誤検知もあるのでウェイクワードは長めがいい。 「OK, Google」とか「Hey, Siri」とかのOK, Heyには意味があった 音 声 入 力 → W e b S p e e c h A P I 一 年 前 に 使 っ た 時 か ら さ ら に 精 度 が 上 が っ た ？ 思 っ た よ り 使 い や す い
20. エ ー ジ ェ ン ト の キャラ ク ター を 自覚さ せて み たい 　 ☑毎 日 T w i t t e r の 参照 ＆ 投稿 　 ☐ 自 分 の G i t H u b R e p o の 参照 ＆自 分への 改善提 案 身 体 性 の 拡 張 　 ☑耳 （ 音 声 入 力） の 実装 　 ☑目 （ カ メ ラ アク セ ス） の 実装 　 ☐ カ メ ラ ア ングル な ど の操 作 の実装 　 ☐ ロ ボ ッ ト アーム 操 作 の実 装 サ ポ ー ト 領 域 の 拡大 　 ☐ G o o g l e F i t 連携 コ ス ト 削 減 対 応 　 ☑サ ブ エ ー ジ ェン ト への 切り出し に よる 基本入 力 ト ークン の 削減 　 ☑O p e n R o u t e r の無 料 枠使う （Gr o k4 .1 とか も 意 外に いい） 開発中、開発予定の機能 開発中、開発予定の機能
21. や ろ う と 思 え ば C l a u d e C od eのS k i l l とか で でき るこ とも 多い が 、 そ れ で も 3 D モデ ル や カメ ラ など、 一 種 無 駄 な 機 能 を与え て い る のに は ツ ー ル と い う よ りもキ ャ ラク タ ー的な エー ジ ェン トを作り たい面 が強い （ な ん の た め に ？と言 われる と 面白 いか ら としか 言えな いが ・ ・・） 例 え ば 、 ・ 寝 て い る エ ー ジェン ト を起 こし てタ スク依 頼を した りと か ・ カ メ ラ で 自 身 のモ デ ルを見 た時の 反応 とか ど う 振 舞 う の か を眺め る の は 面白 いし 、 隣 に 立 っ て い る 感覚 が 楽しい ツールじゃなくてキャラクター ツールじゃなくてキャラクター 放っておくと寝る 「モニターに映っているこのキャラクターが…私なんですか」
22. パーソナルAIエージェントはいいぞ みんなで作って見せ合おう 今日伝えたいこと 今日伝えたいこと
23. 今の構成 今の構成
24. ありがとうございました！