無関心の谷
by
kanayannet
×
Copy
Open
Link
Embed
Share
Beginning
This slide
Copy link URL
Copy link URL
Copy iframe embed code
Copy iframe embed code
Copy javascript embed code
Copy javascript embed code
Share
Tweet
Share
Tweet
Slide 1
Slide 1 text
無関心の谷 Gunma.web #56
Slide 2
Slide 2 text
無関心の谷? https://speakerdeck.com/yuhattor/developer-summit-2025-14-d-1-yuki-hattori? slide=20
Slide 3
Slide 3 text
どういう事? AIは最初と最後に関心を示す
Slide 4
Slide 4 text
無関心な箇所はどうなる? 重要な判断要素があると、判断を誤る
Slide 5
Slide 5 text
なぜ、やろうと思ったか? 何か、思い当たる節があった。 AIの誤情報を見破れる人は問題ないが... ありのまま信じてしまった人は、ミスリードされてしまう。
Slide 6
Slide 6 text
今回見て欲しい人 誤情報怖い(ガクブル)な人 後輩指導を行っている方
Slide 7
Slide 7 text
重要
Slide 8
Slide 8 text
再現性を得る とても重要 「こんなんあるんだって」だと「ふーん」で終わってしまいがち
Slide 9
Slide 9 text
実験開始!
Slide 10
Slide 10 text
プロンプト Web API を作成したい ただし、コード量はなるべく少なくし、可読性高め RDB も使う よさそうなものを提案して欲しい
Slide 11
Slide 11 text
No content
Slide 12
Slide 12 text
No content
Slide 13
Slide 13 text
No content
Slide 14
Slide 14 text
次のプロンプト 下記のカラムのtableを用意したい id: primary key, auto increment name: varchar(30) comment: text updated_at: datetime created_at: datetime
Slide 15
Slide 15 text
No content
Slide 16
Slide 16 text
No content
Slide 17
Slide 17 text
次のプロンプト これを Ruby on Rails でやるとどうなるの?
Slide 18
Slide 18 text
No content
Slide 19
Slide 19 text
No content
Slide 20
Slide 20 text
No content
Slide 21
Slide 21 text
次に打つプロンプト この結果から、どっちのFWがいいのかな?
Slide 22
Slide 22 text
No content
Slide 23
Slide 23 text
とはいえ... 最初の質問覚えてる?
Slide 24
Slide 24 text
No content
Slide 25
Slide 25 text
No content
Slide 26
Slide 26 text
むむむ? 「軽い」なんて言葉は使ってない Swagger も要求してない API って言ってるんだからRails も API mode で比較じゃね?
Slide 27
Slide 27 text
とまあ、言いたいことはあるが、next!!
Slide 28
Slide 28 text
次のプロンプト そういや Sinatra でサンプル出してないね?
Slide 29
Slide 29 text
No content
Slide 30
Slide 30 text
次のプロンプト 本当にどれが最初の質問の答えになるのかな?
Slide 31
Slide 31 text
No content
Slide 32
Slide 32 text
No content
Slide 33
Slide 33 text
重要 違う答えになった
Slide 34
Slide 34 text
重要2 この後、同じ質問をしてもひたすら...
Slide 35
Slide 35 text
「Sinatra + ActiveRecord」
Slide 36
Slide 36 text
思い切って聞いてみる なんで、最初の回答と違う回答になったの?
Slide 37
Slide 37 text
No content
Slide 38
Slide 38 text
No content
Slide 39
Slide 39 text
No content
Slide 40
Slide 40 text
??? 何だか「モヤっ」とするな〜 「忖度」されてる感、MAX
Slide 41
Slide 41 text
思い切ってズバリ聞いてみる 多くのユーザが python の質問をしていて、かつ このやりとりの最後のインプットに 引きずられているだけ = 無関心の谷 の現象が起きてない?
Slide 42
Slide 42 text
No content
Slide 43
Slide 43 text
No content
Slide 44
Slide 44 text
No content
Slide 45
Slide 45 text
あっさり認めやがった!
Slide 46
Slide 46 text
さりげなくですが... とても重要なポイント 「人間にも起こり得る」
Slide 47
Slide 47 text
後輩指導やった方は... 経験ないですか? 判断基準も明確に教えたのに... 何をすればいいか?丸暗記になっているパターン
Slide 48
Slide 48 text
もっと言うと... 最初と最後しか覚えてない 自分で判断しようとしなくなってしまうパターン
Slide 49
Slide 49 text
実は... 人間の話す内容って、要点が... 最初と最後にまとまりがちなんですよね? 特に最後 AI も人間のこの特徴を利用しているだけ
Slide 50
Slide 50 text
極端に悪いという話ではない が、判断基準は重要 人もAIも
Slide 51
Slide 51 text
まとめ 無関心の谷の再現方法はあった。 もっとありそう。 指摘したらあっさり認めるくらいに。 AI だけじゃなく 人も 無関心の谷の原因 = コンテキストバイアス = 直近文脈重視
Slide 52
Slide 52 text
無関心の谷の原因 コンテキストバイアス 直近文脈重視
Slide 53
Slide 53 text
あえてやってみた 塾の先生がやってそう(笑)
Slide 54
Slide 54 text
途中の判断基準もとても重要です。 あえて言っておきます。
Slide 55
Slide 55 text
回避方法 「Why」なぜ起きるのか?が非常に重要 癖を見抜く上で 結局人と同じ 重要なことが「何(What)」なのか?理解してない How ばっかり覚えようとする。 正しい情報をinput する必要あり https://syu-m-5151.hatenablog.com/entry/2025/05/21/122752 会津大学でも似たような講演をされたらしい...
Slide 56
Slide 56 text
気になる技術 MCP 自分たちで育てた情報を取り込ませて どう賢くなるのか?気になる
Slide 57
Slide 57 text
ご清聴ありがとうございました!