Upgrade to Pro — share decks privately, control downloads, hide ads and more …

20180918-Digitime 導入MCU設計 催熟智慧語音辨識應用市場

blue chen
September 24, 2018

20180918-Digitime 導入MCU設計 催熟智慧語音辨識應用市場

blue chen

September 24, 2018
Tweet

More Decks by blue chen

Other Decks in Science

Transcript

  1. 1
    導入MCU設計 催熟智慧語⾳音辨識應⽤用市場

    View Slide

  2. 2 2
    85% new product had
    Alexa/google Voice assistant.
    Amazon IFA ⼤大會上公佈了了 Alexa 的各項數據:全球範圍內, Alexa 已經擁有
    50000 個功能,與 20000 種設備相容,並與超過 3500 個品牌合作。

    View Slide

  3. 3
    產品趨勢
    往體積更更⼩小以 or ⼿手機 or ⼤大型家電⽅方向去走
    趨勢:隨⾝身攜帶化, 家電化
    帶動 MCU 需求提升

    View Slide

  4. 4 4

    View Slide

  5. Training Deployment
    RelaJet Zoo (各種情境模型)
    RelaJet AI Architecture
    Linux OS
    Win/Mac
    Android OS
    IOS
    Tensorflow
    Theano
    Keras
    Caffe2
    Caffe
    Pytorch
    … etc
    Base on
    Cortex A / X86
    powerful platform
    RelaJet NN
    Base on
    CortexM
    單⼼心片架構系統
    語⾔言層 C / C++ C / C++ python/Js/ .. etc
    C / C++
    RelaJet
    Tool
    User customize model

    View Slide

  6. 6 6
    Application
    Tensorflow /
    Caffe …
    Transfer Tool
    CMSIS-NN
    Coretex-M
    Third-party
    Support
    (Open AI Labs)
    No open source
    Application
    RelaJet Tool
    RelaJet-NN
    Coretex-M
    Int8
    Float
    Caffe
    Only int8
    精度不變
    處理理
    5-200ms

    View Slide

  7. 7
    What is RelaJet
    software offering?

    View Slide

  8. RelaJet
    AI HW&SW Solution
    RelaJet
    Health Care Data Network
    RelaJet Hearing Platform

    View Slide


  9. B C
    C
    B
    A
    RelaJet Edger
    Perfectly divide human voices within 10ms.

    B C
    C
    B
    A
    Traditional
    Hearing Aid

    View Slide

  10. 10
    One more thing ! At Coffee Shop
    0s 1s 2s 3s 4s


    你 好



    你 早 好 ??
    其他服務
    輸出結果
    RelaJet
    輸出結果
    Speaker 1 : 你好嗎
    Speaker 2: 早安
    我們可將分離的⼈人聲分析出
    (以及所在的環境聲⾳音)
    A A
    Age: 20-30
    Emotion: 正常
    Gender: 男
    Age: 20-30
    Emotion: 正常
    Gender: 男
    實際情況
    RelaJet聲⾳音入⼝口引擎跟現成語⾳音服務差異異

    View Slide

  11. 聲⾳音入⼝口 聲⾳音認證
    Wake Up
    Voice ID
    Specific Sound Monitor
    Payment with VID
    Private Data 

    Certification
    •Language
    •Age
    •Gender
    •Emotion
    •Place
    •Crowd
    •Action log
    Surrounding Profile
    Voice Certification
    Voice Entry Voice Analytics

    View Slide

  12. RelaJet Voice Assistant - 核⼼心功能
    voice
    command
    One Mic
    process
    Local
    Speech
    Recognition
    關鍵字喚醒
    聲紋辨識
    Speech to text
    yes: return
    no: stop
    Natural Language
    Understanding Application
    First Step
    Second Step
    聲控指令
    特定聲⾳音監控
    User 可提供⾃自⼰己的⼝口語
    做識別率提升補強
    提供針對特定領域
    的語意理理解客製化
    短時間內讓
    User 客製化
    終端使⽤用者⾳音檔客製化是
    現⾏行行競爭對⼿手的難題
    其他競品⾃自然語⾔言處理理
    鮮少在本地端執⾏行行
    讓您的機器更更理理解使⽤用者 更更低的連雲成本+更更好的體驗
    RelaJet 的優勢 :
    RC201809181

    View Slide

  13. 13
    Device

    RelaJet
    Inside
    Cloud Voice Assistant
    To know who, where, what ,when.

    All process locally and offline.
    RelaJet Voice Analytics

    View Slide

  14. 14
    RelaJet Hearing Series - RT1050 SoM
    NXP
    RT
    14
    Flash
    RAM
    PDIC
    正⾯面 反⾯面
    USB Host
    Power
    SD
    card
    15 mm
    30 mm
    環境分析
    聲紋分析
    語⾳音控制
    ⼈人群分析
    語⾳音喚醒, 短指令識別
    聲紋認證
    年年齡, 情緒, 性別
    所在地⽅方, 活動分析(家⽤用)

    View Slide

  15. 15
    RelaJet Voice Assistant - NXP Solution
    可更更改的 Wakeup (本地)
    語意理理解 (丟雲端)
    可更更改的 Wakeup (本地)
    可更更改的聲控指令(本地)
    IMX6 (UL) IMX7D IMX8
    150 USD 起
    30 USD 起 (MOQ 3K)
    Platform RT Series IMX6 (UL) IMX7D IMX8
    Wakeup V V V V
    VID V V V V
    Short
    command
    5-20 commands
    (無語⾔言限制)
    5-100 commands
    (無語⾔言限制)
    Unlimited
    (無語⾔言限制)
    Unlimited
    (無語⾔言限制)
    Natural
    Language
    Understanding
    Cloud Cloud
    Local dictionary
    ( 50 MB )
    Local dictionary
    ( 300 MB )
    Local training V V V V

    View Slide