AI in Classroom - Speaker Deck

Slide 1

Slide 1 text

AI in Classroom – [email protected] [email protected] 1

Slide 2

Slide 2 text

AI in Classroom – [email protected] Ryan Chung  資策會數位教育研究所創新學習中心 ➢ 產業合作組組長 - 國際培訓、跨國產業合作 ➢ 養成班導師 - 轉職培訓、專題輔導 ➢ 課程經理 - 企業內訓、地方政府民眾推廣、大專生活動 ➢ 課程講師 - 語音助理、Chatbot應用開發、網站開發 http://mobiledev.tw/ryan 2

Slide 3

Slide 3 text

AI in Classroom – [email protected] 3 資策會數位教育研究所 Invest talents , create future. 投資人才、創造未來創新 – For pupils to experience learning differently than before. 提升 – For adults to learn better than before. 永續 – For elderly to learn as well as before. 讓中高齡者，跟以前一樣的學習。讓在職者，學得比以前更好。讓在學者，學以前沒學過的。

Slide 4

Slide 4 text

AI in Classroom – [email protected] 4 教研所培訓的學員進入台灣頂尖百大企業 4

Slide 5

Slide 5 text

AI in Classroom – [email protected] 5 全方位教育解決方案 5 我們的主場引爆學習的力量你是孩子的關鍵學校內容上學老師尊重每個人都很特別適性從聰明到睿智銀髮留給準備好的你工作都想要加薪你我我來幫你一把創業捲起袖子一起來社創智慧校園科技智慧學習教材偏鄉教育師資增能培訓特殊教育學習降低失業率輔導青年創業提高薪資社會創新活動樂齡教育再遠也要跟你一起

Slide 6

Slide 6 text

AI in Classroom – [email protected] 人工智慧 AI • Artificial Intelligence –也稱為MI (Machine Intelligence) –以智慧代理人(Intelligent Agent)形式呈現 –模擬人類進行學習、問題解決 –能夠感知環境的變化，以最可能達成目標的方式，自動進行應變。 https://en.wikipedia.org/wiki/Artificial_intelligence 6

Slide 7

Slide 7 text

AI in Classroom – [email protected] IT 技術集大成網站開發 APP開發語音助理 Chatbot 資料科學巨量資料智慧系統 AI 人工智慧 7

Slide 8

Slide 8 text

AI in Classroom – [email protected] Workplace Safety Demo 8 https://www.youtube.com/watch?v=pL-c00M2CnI

Slide 9

Slide 9 text

AI in Classroom – [email protected] Gartner 2019 十大策略性技術趨勢  Autonomous Things 自動化生態 – 例:無人機巡視農場，通知無人耕耘機開始耕作  Augmented Analytics 擴增分析 – 運用機器學習與自然語意分析來輔助資料收集  AI-Driven Development AI導向式開發 – 2022年，至少40%以上的應用程式，會需要有人工智慧相關專家合作  Digital Twins  Empowered Edge  Immersive Experience  Blockchain  Smart Spaces  Digital Ethics and Privacy  Quantum Computing https://www.gartner.com/smarterwithgartner/gartner-top-10-strategic-technology-trends-for-2019/ 9

Slide 10

Slide 10 text

AI in Classroom – [email protected] 醫療案例：AI遠端糖尿病照護系統 • 訓練 –由醫生看大量照片，分辨眼睛有病變與沒病變，並標記熱區(病變發生處) • 硬體 –工研院生醫所眼底攝影機 • 軟體 –晉弘科技的影像認知、深度學習系統 • 情境 –患者在家拍照上傳，AI自動偵測是否病變 • 預計研發時間：四年 Source: AI全面來襲天下雜誌特刊 10

Slide 11

Slide 11 text

AI in Classroom – [email protected] 電商案例：德國電商Otto • 分析交易資料，預測使用者一週後要買什麼 • 每個月自動從第三方選購20萬個商品 • 導入後，多餘庫存量減少五分之一 Source: AI全面來襲天下雜誌特刊 11

Slide 12

Slide 12 text

AI in Classroom – [email protected] 旅遊案例：Google Trips App • 根據品味、需求與時間，自動產生每日套裝行程 • 依天氣、營業時間調整行程 Source: AI全面來襲天下雜誌特刊 12

Slide 13

Slide 13 text

AI in Classroom – [email protected] AWS AI https://aws.amazon.com/machine-learning/ NEW NEW NEW 13

Slide 14

Slide 14 text

AI in Classroom – [email protected] New AWS AI Services • Amazon Forecast – 與Amazon.com本身使用相同的技術架構。透過組合時間序列資料以及附加的一些變數來建構預測分析。 • Amazon Personalize – 即時提供個人化推薦。只要提供由你的應用程式所產生的活動數據，例如Page View, 註冊資訊, 購買記錄等等。然後再提供你想推薦的內容，如文章、產品、影片或音樂等，Amazon Personalize會依據你提供的資料產生模型。 • Amazon Textract – 從掃描文件中自動萃取出文字的服務。不只是文字，也能夠從表格中取出數據的格式與資訊。 – 你可以加速文件處理流程，也能夠建立智慧搜尋索引，例如看到什麼內容就自動簽核通過。 14

Slide 15

Slide 15 text

AI in Classroom – [email protected] AWS AI https://aws.amazon.com/machine-learning/ NEW 15

Slide 16

Slide 16 text

AI in Classroom – [email protected] Amazon AI 應用服務 • 推薦系統 –Two Decades of Recommender Systems at Amazon.com • 語音助理 –Amazon Alexa • 無人商店 16 Source:The Verge

Slide 17

Slide 17 text

AI in Classroom – [email protected] Amazon Comprehend • 語言識別、關鍵資訊擷取、理解正面負面 https://aws.amazon.com/tw/comprehend/ 17

Slide 18

Slide 18 text

AI in Classroom – [email protected] Amazon Polly • 文字 -> 語音 • 接近真人語音 • 52種聲音、25國語言 • 速度快、準確度高 • 可重複播放使用 18

Slide 19

Slide 19 text

AI in Classroom – [email protected] SSML • say-as –一個字一個字念 • prosody –可調整速度、大小聲 • lang –可以穿插別國語言 https://developer.amazon.com/docs/custom-skills/speech-synthesis-markup-language-ssml-reference.html 19

Slide 20

Slide 20 text

AI in Classroom – [email protected] 使用案例 • 將RSS訂閱內容轉換成廣播節目 • 在行動裝置上「聽」你所喜愛的部落格內容 https://github.com/aws-samples/amazon-polly-sample 20 Source: meccanismocomplesso.org

Slide 21

Slide 21 text

AI in Classroom – [email protected] 模擬多人對談 21 https://developer.amazon.com/docs/custom-skills/speech-synthesis-markup-language-ssml-reference.html

Slide 22

Slide 22 text

AI in Classroom – [email protected] 微軟認知服務 https://azure.microsoft.com/zh-tw/services/cognitive-services/ 22

Slide 23

Slide 23 text

AI in Classroom – [email protected] 辨識服務 MS Cognitive Service • 辨識 – 可聰明地識別、標示及控管圖片的影像處理演算法。 • 知識 – 對應複雜資訊和資料，以解決智慧建議和語意搜尋等工作。 • 語言 – 讓您的應用程式能夠透過預先建置的指令碼處理自然語言、評估情感，以及了解如何辨識使用者想要的項目。 • 語音 – 將語音轉換成文字、使用語音來驗證，或將說話者辨識新增至您的應用程式。 • 搜尋 – 將 Bing 搜尋 API 新增至您的應用程式，並充分利用以單一 API 呼叫合併數十億個網頁、影像、影片和新聞的能力。 23

Slide 24

Slide 24 text

AI in Classroom – [email protected] 影像識別：圖片網址 • 輸入圖片網址，可回傳圖片資訊 24

Slide 25

Slide 25 text

AI in Classroom – [email protected] 選取 Computer Vision API https://azure.microsoft.com/zh-tw/services/cognitive-services/computer-vision/ 25

Slide 26

Slide 26 text

AI in Classroom – [email protected] 同意條款並登入帳號 26

Slide 27

Slide 27 text

AI in Classroom – [email protected] 進入 Azure • 左下角 More services -> Cognitive Services https://portal.azure.com 27

Slide 28

Slide 28 text

AI in Classroom – [email protected] 建立服務 28

Slide 29

Slide 29 text

AI in Classroom – [email protected] 取得 API KEY 29

Slide 30

Slide 30 text

AI in Classroom – [email protected] 測試 • 下載範例 • 填上API KEY，開始測試 30 https://github.com/ryan403/ImageRecognition

Slide 31

Slide 31 text

AI in Classroom – [email protected] Custom Vision https://www.customvision.ai 31

Slide 32

Slide 32 text

AI in Classroom – [email protected] 建立專案 • New Project -> Add images • 標記Tag，至少5張照片 –In Classroom • 訓練 • Quick Test 32

Slide 33

Slide 33 text

AI in Classroom – [email protected] In Classroom 33

Slide 34

Slide 34 text

AI in Classroom – [email protected] Quick Test 34

Slide 35

Slide 35 text

AI in Classroom – [email protected] Face API https://azure.microsoft.com/zh-tw/services/cognitive-services/face/ 35

Slide 36

Slide 36 text

AI in Classroom – [email protected] 臉部驗證 • 檢查兩張臉部是屬於同一個人的可能性。API 會傳回信心分數，顯示兩張臉部是屬於同一個人的可能性。 36

Slide 37

Slide 37 text

AI in Classroom – [email protected] Microsoft Case – Baby Come Home https://www.youtube.com/watch?v=AuXnVF_nFws 37

Slide 38

Slide 38 text

AI in Classroom – [email protected] 臉部偵測 • 偵測影像中的一或多張人臉，並取得影像臉部位置所在的臉部矩形及臉部屬性，該屬性內含以機器學習為基礎的臉部特徵預測。可用的臉部屬性功能包括：年齡、表情、性別、姿勢、微笑及鬍子，以及影像中每張臉部的 27 個地標。 38

Slide 39

Slide 39 text

AI in Classroom – [email protected] 其他服務 39

Slide 40

Slide 40 text

AI in Classroom – [email protected] 上傳作業服務 • 語意分析 + 聊天機器人+ 資料庫 + 部署上線 DialogFlow • 意圖：繳交作業 • 資料：學號、姓名、作業 Google Drive • 資料儲存 MS Bot Framework Bot Channels Registration 40

Slide 41

Slide 41 text

AI in Classroom – [email protected] Bot Framework Emulator 本地測試 41

Slide 42

Slide 42 text

AI in Classroom – [email protected] Test in Web Chat • 在Azure雲端上的Web Chat進行測試 • 如果正常即部署成功！ • 並確認Google試算表上有出現資料 42

Slide 43

Slide 43 text

AI in Classroom – [email protected] 查詢成績服務 • 語意分析 + 聊天機器人+ 資料庫 + 部署上線 DialogFlow • 意圖：查詢成績 • 資料：學號、姓名、密碼 Google Drive • 資料讀取 MS Bot Framework Bot Channels Registration 43

Slide 44

Slide 44 text

AI in Classroom – [email protected] 數人頭(Bot + 電腦視覺) 44

Slide 45

Slide 45 text

AI in Classroom – [email protected] Summary • AI技術 –電腦視覺、語意分析、語音處理、知識萃取 • 教學活動 –知識傳遞、學習過程監督、成果驗收 • AI於教學上的應用 –自動課堂筆記(語音 -> 文字 -> 重點) –即時課堂氣氛呈現(影像 -> 人臉 -> 情緒 -> 彙整) –知識多樣化呈現(不同的學生給予不同的呈現方式) –自動資訊補充(語音識別/圖像識別 -> 查詢資料) 45

Slide 46

Slide 46 text

AI in Classroom – [email protected] 敬請指教 Ryan Chung Section Manager III Digital Education Institute [email protected] 46