Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Amazon Connect の通話音声を良い感じに Transcribe する / Amazon Connect to Transcribe

r3_yamauchi
February 06, 2020

Amazon Connect の通話音声を良い感じに Transcribe する / Amazon Connect to Transcribe

JAWS-UG Osaka 「知ってると役立つ、AWSちょいテク祭り」 LT資料
Amazon Transcribe の カスタム語彙 (vocabulary) について話しました。

r3_yamauchi

February 06, 2020
Tweet

More Decks by r3_yamauchi

Other Decks in Technology

Transcript

  1. #jawsug
    Amazon Connect の通話音声を
    良い感じに
    JAWS-UG Osaka 「知ってると役立つ、AWSちょいテク祭り」
    アールスリーインスティテュート
    山内 勇人
    2020. 2. 6 (Thu)
    Transcribeする

    View full-size slide

  2. #jawsug
    #jawsug
    自己紹介
    2
    ・名前 うっちー
    ・阪神タイガースと音楽フェスを愛してます
    ・サーバーレスでない開発はしたことがあり
    ません
    ・好きなAWSサービス: Amazon EventBridge

    View full-size slide

  3. #jawsug
    #jawsug
    3
    https://aws.amazon.com/jp/about-aws/whats-new/2019/11/amazon-transcribe-now-supports-speech-to-text-in-7-additional-languages/
    #jawsug

    View full-size slide

  4. #jawsug
    #jawsug
    通話記録を文字起こし
    4
    Amazon Connect
    wav StartTranscriptionJob
    Amazon Comprehend
    一部の画像を いらすとや(irasutoya.com)様よりお借りしました。
    Amazon Transcribe
    文字起こし
    結果JSON
    Amazon EventBridge
    ごにょごにょ
    通話終了

    View full-size slide

  5. #jawsug
    #jawsug
    5
    #jawsug

    View full-size slide

  6. #jawsug
    #jawsug
    6
    #jawsug

    View full-size slide

  7. #jawsug
    #jawsug
    7
    う~ん。。わからんw
    #jawsug

    View full-size slide

  8. #jawsug
    #jawsug
    8
    https://dev.classmethod.jp/cloud/aws/amazon_transcribe_can_now_identify_and_label_transcripts_based_on_audio_channels/
    #jawsug

    View full-size slide

  9. #jawsug
    #jawsug
    9
    #jawsug

    View full-size slide

  10. #jawsug
    #jawsug
    10
    会話・やり取りの流れが掴めない
    #jawsug

    View full-size slide

  11. #jawsug
    #jawsug
    11
    http://blog.serverworks.co.jp/tech/2019/11/25/amazon_connect_transcribe/
    #jawsug

    View full-size slide

  12. #jawsug
    #jawsug
    12

    View full-size slide

  13. #jawsug
    #jawsug
    13
    Transcribe の出力結果

    View full-size slide

  14. #jawsug
    #jawsug
    14

    View full-size slide

  15. #jawsug
    #jawsug
    15

    View full-size slide

  16. #jawsug
    #jawsug
    16
    AWS re:Invent 2019 - Andy Jassy による基調講演 https://www.youtube.com/watch?v=uC2jIRm0eAM&t=7555s
    #jawsug

    View full-size slide

  17. #jawsug
    #jawsug
    17
    Contact Lens for Amazon Connect
    https://aws.amazon.com/jp/blogs/news/contact-lens-for-amazon-connect-preview/

    View full-size slide

  18. #jawsug
    #jawsug
    18
    SELECT aws_comprehend_detect_sentiment(content, 'ja') AS
    sentiment, content
    FROM transcribed_table
    ORDER BY timestamp ASC
    Amazon Comprehend で感情分析

    View full-size slide

  19. #jawsug
    #jawsug
    19
    SELECT aws_comprehend_detect_sentiment(content, 'ja') AS
    sentiment, content
    FROM transcribed_table
    ORDER BY timestamp ASC
    Amazon Comprehend で感情分析

    View full-size slide

  20. #jawsug
    #jawsug
    20
    Contact Lens は高機能だが、
    文字起こし自体の精度を高めない
    と、適切な分類・分析を行えない
    はず
    #jawsug
    https://aws.amazon.com/jp/blogs/news/contact-lens-for-amazon-connect-preview/

    View full-size slide

  21. #jawsug
    #jawsug
    21
    カスタム語彙 (vocabulary)

    View full-size slide

  22. #jawsug
    #jawsug
    22
    カスタム語彙 (vocabulary)
    カスタム語彙をリストまたはテーブル
    形式で作成することができるが、出力
    表記を指定したい場合はテーブル形式
    でテキストファイルを作成してアップ
    ロードする必要がある。

    View full-size slide

  23. #jawsug
    #jawsug
    どうやって?
    https://commons.wikimedia.org/wiki/File:Just_a_Really_Good_Idea_(21908322453).jpg
    #jawsug
    23

    View full-size slide

  24. #jawsug
    #jawsug
    24
    kintoneから更新できるようにした

    View full-size slide

  25. #jawsug
    #jawsug
    25
    kintoneから更新できるようにした

    View full-size slide

  26. #jawsug
    #jawsug
    26
    #jawsug

    View full-size slide

  27. #jawsug
    #jawsug
    27
    #jawsug
    kintoneのデータを読み込み
    Lambda関数を実行するカスタ
    マイズをノーコードで作成

    View full-size slide

  28. #jawsug
    #jawsug
    28
    自動的に文字起こしを行い表示

    View full-size slide

  29. #jawsug
    #jawsug
    29
    #jawsug

    View full-size slide

  30. #jawsug
    #jawsug
    30
    #jawsug

    View full-size slide

  31. #jawsug
    #jawsug
    31
    自動的に文字起こしを行い表示

    View full-size slide

  32. #jawsug
    #jawsug
    32
    AWS re:Invent 2019 - Dr. Werner Vogels による基調講演 https://www.youtube.com/watch?v=NKW-q7FE2rc
    #jawsug

    View full-size slide

  33. #jawsug
    #jawsug
    まとめ
    33
    ・カスタム語彙 (vocabulary) を鍛えておいて
    損はありません
    ・自分で実際に手を動かして試してみないと
    分からないことがたくさんあります
    ・PoCは時間をかけず手早く作りましょう

    View full-size slide

  34. #jawsug
    #jawsug
    34
    ご清聴ありがとうございました。
    アールスリー aws 検索

    View full-size slide