【Sekoe】技育展2024 2回戦 プレゼン資料

有志3人と「音声で話さなくてもリモート会議で双方向コミュニケーションできる」ことを目標に開発したプロダクトを技育展2024でプレゼンした。

Transcript

1. Sekoe FISH🐠(Funayama, Iizuka, Saito, Hanawa)
2. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 僕たち聴覚障害者がSekoeでやりたいこと リモート会議で聴者と気軽に 双方向コミュニケーションしたい！ 2
3. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 1. チャットに気づいてくれないのを解決する 【課題】 チャットに気づかない… 音声合成機能 呼びかけ声やチャット内容を音声で発することで、 チャットに気付かせる！ 3
4. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 2. チャットを待つ違和感を解消する 【課題】 待ち時間が長くて不安… 句読点を句切る機能 チャットに句読点を入るとこれまで入力された文を 自動的に音声で送信でき、待ち時間の短縮！ 4
5. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 デモ動画 5
6. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 予備実験 聴者対象の「チャットの気付きやすさ」と「待つ違和感の解消」の効果性の検証 【環境】 ・聴覚障害者1名+聴者3名（サンプル数は少ないことを前提） ・Zoom（カメラオン） 【検証方法】 ・「チャットの気付きやすさ」…ZoomチャットとSekoeそれぞれ、 送信から聴者が気付く反応を示すまでの時間 ・「待つ違和感の解消」…ZoomチャットとSekoeそれぞれ、チャットが 来るまでに待つ違和感に関する聴者による主観評価アンケート回答 6
7. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 予備実験 チャットの気付きやすさ 【考察】 ・ サンプル数は非常に少ないが、 ZoomチャットよりSekoeの方が 聴者が約4秒早く反応したという様子 が見られた 4.19秒差 9.89秒 5.70秒 ・ 聴者が対話に集中する場面では、 Sekoeの方がすぐに気付きやすく なるのではないか 7
8. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 予備実験 待つ気まずさの軽減効果 チャットが送られてくるまで、どのくらい待たされるか想像 がつかなかった。 感覚として、待たされた感じがあった。少し「まだ かな？」 と思った。 入力の待ち時間だろうとは思ったが 、どのくらい待てば 入力が終わるのかがわからないので 、いつかなまだか なと感じていたので 。 待たされている感覚はチャットだけに比べると小さい。 しか し、何を言っているのか聞き取れない部分があった。 最初の1フレーズが出力されるまでの時間はそこそこ長く 感じたが、その後はそこそこの長さで音声が続いていた し、続きそうなところで音声が終わるのは、 いきなり全部来 るのを待つよりは気が楽に感じた 8
9. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 • 素早い送信のために形態素解析を使用した 句読点とカンマ・コンマで自動的に送信できるようにしたい ⇒「形態素解析」の活用 • コードの可読性 9
10. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 より使いやすく、より自然な会話を目指す • • • UIデザインの改善 バグの解消 自然な会話の実装 ◦ ◦ 自動で間投詞を発出する機能 感情表現の導入 etc... 聴覚障害者と聴者と一緒にデモを積み重ねて改善していく予定 10
11. プロダクトの目標 アピールポイント 完成度 チャレンジしたこと・工夫点 今後の展望 予備実験 チャットの気付きやすさ 【考察】 ・ 軽い雑談といったリラックスな様 子だったので、Zoomチャットでも 聴者がすぐに気付いたとみられた ・ Sekoeの呼び出し機能の音量が 小さいと聴者たちは全く気付かない ※Sekoe（音量50）は聴者から反応 がなかった ・ 聴者が対話に集中する場面では、 音量の大きいSekoeの方がすぐに 気付きやすくなるのではないか 1 1