AI Teaching Talk

Transcript

1. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Ryan@MobileDev.TW 人文與社會案例剖析 行動開發學院 1 推廣經驗談
2. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Ryan Chung  產業AI化/AI產業化 ➢ 各產業AI導入 ➢ Chatbot/語音助理應用開發 ➢ 行動開發競賽評審  培訓服務/顧問諮詢 ➢ 微軟國際技術工作坊講師 ➢ AWS 教育雲端推廣大使 ➢ 元智大學兼任助理教授 http://mobiledev.tw/ryan 2
3. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 校園講座 3
4. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 實作工作坊 4
5. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 疫情之後 5
6. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 IT 技術集大成 網站開發 APP開發 語音助理 Chatbot 資料科學 巨量資料 智慧系統 AI 人工 智慧 6
7. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 2030的未來世界 - NEC https://www.nec.com/en/global/onlinetv/en/nsc_future3.html 7
8. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 和歌山縣南紀白濱渡假村 - 人臉識別 8
9. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 和歌山縣南紀白濱渡假村 - 人臉識別 南紀白濱機場 • 人臉登錄 • 旅遊客製化情報 飯店AI化 • 專屬迎賓 • 房間人臉解鎖 漁人碼頭、石津壽司屋 • 人臉結帳 9
10. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Gartner 2020 十大策略性技術趨勢  Hyper-automation 超自動化 – RPA(Robotic Process Automation)、iBMPS(Intelligent Business Management Software)  Multi-experience 多重體驗 – 例如達美樂結合自駕車、披薩追蹤器與智慧音箱來送餐點餐  Democratization 科技普及化 – 應用開發、資料分析、設計與知識，例如自動產生分析模型  Human augmentation 認知強化  Transparency and traceability  The empowered edge  The distributed cloud  Autonomous things  Practical blockchain  AI security https://www.gartner.com/smarterwithgartner/gartner-top-10-strategic-technology-trends-for-2020/ 10
11. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 依產業別看AI導入成熟度 金融 資通訊 導入程度 需 求 程 度 物流 能源 媒體 汽車 醫療 11
12. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 AI 成熟度階段 Source: Ovum 12
13. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Data Scientist -> AI Engineer 蒐集 儲存 分析 呈現 訓練 測試 語意 自動 13 Data
14. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 AI 探討層級 應用 技術 架構 • 無人車 • 個人助理 • 金融科技 • 智慧家庭 • 電腦視覺 • 自然語言處理 • 深度學習 • 語音辨識 • 核心處理器 • 底層演算法 • 運算平臺 Source : 中信證券研究部 14
15. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 最終成就 應用技能 核心課程 基礎技能 基於基礎技能與核心課程 再將其從理論邁向實際的應用 針對該職業開始增強相關技術的訓練 以培養未來工作會需要的專業能力 將該領域相關的理論基礎 進行扎實地學習 最後必須通過該領域之模擬專案測試 檢驗是否具備職業技能 Fewer graduates, higher revenue, greater skills More graduates, lower revenue, baseline skills 15 學習階段：基礎->核心->應用
16. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 16 I. 基礎 AI Fundamentals II. 核心 Core AI III. 應用 Applied AI (擇一) IV. 專案 Final Project
17. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Amazon Polly 17
18. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Amazon Polly • 文字 -> 語音 • 接近真人語音 • 52種聲音、25國語言 • 速度快、準確度高 • 可重複播放使用 18
19. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 文字轉語音服務 19 <speak> He was caught up in the game.<break time="1s"/> In the middle of the 10/3/2014 <sub alias="World Wide Web Consortium">W3C</sub> meeting, he shouted, "Nice job!" quite loudly. When his boss stared at him, he repeated <amazon:effect name="whispered">"Nice job,"</amazon:effect> in a whisper. </speak> 停頓1秒 決定縮寫 的念法 語音特效 (悄悄話) https://docs.aws.amazon.com/polly/latest/dg/supportedtags.html 支援語法：
20. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 用AI做多人廣播劇 https://developer.amazon.com/docs/custom-skills/speech-synthesis-markup-language-ssml-reference.html 20
21. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 電影愛好分析 – 20th Century Fox • 類似的元素可能可以吸引到同一族群的觀眾 • 推論案例 –預告片中比較多主角特寫的通常是愛情/劇情片， 而不會是動作片 21 20th Century Fox is using AI to analyze movie trailers and find out what films audiences will like.
22. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 微軟認知服務 https://azure.microsoft.com/zh-tw/services/cognitive-services/ 22
23. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 辨識服務 MS Cognitive Service • 辨識 – 可聰明地識別、標示及 控管圖片的影像處理演算法。 • 知識 – 對應複雜資訊和資料，以解決 智慧建議和語意搜尋等工作。 • 語言 – 讓您的應用程式能夠透過預先建置的指令碼處理自然語言、 評估情感，以及瞭 解如何辨識使用者想要的項目。 • 語音 – 將語音轉換成文字、使用語音來驗證，或將說話者 辨識新增至您的應用程式。 • 搜尋 – 將 Bing 搜尋 API 新增至您的應用程式，並充分利用 以單一 API 呼叫合併數十 億個網頁、影像、影片和新聞的能力。 23
24. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 用AI產生圖說 • 輸入圖片網址，可回傳圖片資訊 24
25. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 圖片內文字識別 – 信用卡辨識 使用服務：微軟 Azure Computer Vision 使用目的：辨識信用卡卡號 實測樣本：網路上抓取10張信用卡樣板 實測結果 8張可正確辨識完整卡號、2張失敗(部分數字) 25
26. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 AI翻譯器 26
27. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Face API 人臉辨識服務 https://azure.microsoft.com/zh-cn/services/cognitive-services/face/
28. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 臉部偵測 • 偵測影像中的一或多張人臉，並取得影像臉部位置所在的臉部矩形 及臉部屬性，該屬性內含以機器學習為基礎的臉部特徵預測。可用 的臉部屬性功能 包括：年齡、表情、性別、姿勢、微笑及鬍子， 以及影像中每張臉部的 27 個地標。 28
29. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 臉 部 屬 性 屬性 內容 age 目視預測年齡 gender male 男性 或 female 女性 headPose 3D立體 roll/yaw/picth 臉部角度方向 smile 笑容強度，介於 0~1 facialHair 介於 0 ~ 1 moustache 嘴上鬍 beard 下巴鬍 sideburn 雙鬢 glasses NoGlasses 沒戴眼鏡 ReadingGlasses 眼鏡 Sunglasses 太陽眼鏡 SwimmingGoggles 泳鏡 emotion 情緒指數 介於 0 ~ 1 neutral 中性 anger 憤怒 contempt 鄙視 disgust 厭惡 fear 恐懼 happiness 幸福 sadness 傷心 surprise 驚訝 屬性 內容 hair bald 禿頭程度 invisible 是否看不見 hair color 區域頭髮顏色 makeup eyeMakeup 眼睛是否上妝 lipMakeup 嘴唇是否塗口紅 occulusion foreheadOccluded 前額是否被遮蔽 eyeOccluded 眼睛是否被遮蔽 mouthOccluded 嘴巴是否被遮蔽 accessories headwear 頭飾 glasses 眼鏡 mask 口罩 blur 0(臉部清楚) ~ 1(臉部很模糊) exposure goodExposure 曝光正常 overExposure 過度曝光 underExposure 曝光不足 noise 0(低雜訊) ~ 1(高雜訊) 29
30. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 有口罩 沒口罩 "accessories": [] "accessories": [ { "type": "mask", "confidence": 0.99 } ], Source : https://s2.nowlooker.com/ 30
31. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 多人判斷有無戴口罩 • 使用Emoji來顯示有口罩沒口罩 • 前提：認知服務必須先有判斷到這個人，才有 機會判斷他有沒有戴口罩 31
32. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 上傳作業服務 • 語意分析 + 聊天機器人+ 資料庫 + 部署上線 DialogFlow • 意圖：繳交作業 • 資料：學號、姓名、 作業 Google Drive • 資料儲存 MS Bot Framework Bot Channels Registration 32
33. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Bot Framework Emulator 本地測試 33
34. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Test in Web Chat • 在Azure雲端上的Web Chat進行測試 • 如果正常即部署成功！ • 並確認Google試算表上有出現資料 34
35. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 數人頭(Bot + 電腦視覺) 35
36. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 新世代的資訊人能力 • infographics、互動圖表 圖解力 • 資料分析工具、統計學 分析力 • 網路爬蟲、關鍵字通知、管道整合 情蒐力 • 判斷是否能引起共鳴、廣大迴響 同理力 • 將來源、分析、產出系統化 系統力 36
37. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 AI 藝術分析 37 https://www.youtube.com/watch?v=cl1CS2qWvoQ
38. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Will AI take my job? 38 https://willrobotstakemyjob.com/
39. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 AI 技術分類 39 電腦視覺 自然語言 數據分析 圖片分類 物件偵測 物件追蹤 語義分割 人臉辨識 其他 機器翻譯 語音識別 對談系統 文章分析 情緒判斷 其他 描述分析(自動分類、綜整) 診斷分析(因果關聯、追查) 預測分析(推論未來、警示) 決策分析(行動建議、參考) 其他 Source: MC.ai
40. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 問題 -> 技術 -> 方案 這個東西 有出現嗎? 物件偵測 癌症判斷 這個東西 是什麼類別? 分類 腫瘤類型 這個東西在畫面 上佔據多大位置? 語意分割 腫瘤大小 分析 接下來最有可能 發生什麼結果? 預測 存活率 如何滿足 目標需求? 推薦 治療方式 40
41. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 人文社會潛在發展應用 41 數位典藏 創作生成 藝術鑑價 語言文化 情緒分析 歷史分析 地理資訊 因果分析 翻譯生成 口音分析 對談輔助 局勢預測 整理 : 行動開發學院
42. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 國際研討會 互動教學方式 以AWS Re:Invent為例 42
43. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Keynote 43
44. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 1hr Public Speech Session 44
45. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 2.5 hr Hands-on Workshop 45
46. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Certification Workshop 46
47. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 1hr Concept Discussion Session 47
48. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 1to5 Expert Advanced Workshop 48
49. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 Al Teaching in One Page 形式 • 趨勢講座 • 工作坊 • 討論會 • 課程 教材 • Google文件 • Notion • SlideShare • GitHub 對象 • 社會大眾 • 企業內訓 • 大專院校 • 中小學 • 新南向 聯繫 • 電子郵件 • FB社團 • Line群組 49 需求導向 • 技能養成 • 職業方向 • 專案實作 • 概念吸收 族群導向 • 趣味性 • 特定方向 • 方言 • 行話 結果導向 • 心得報告 • 提案規劃 • 教學準備 • 相關資源 宣傳導向 • 註冊轉換率 • 瀏覽次數 • 購買件數 Student First VS. Client/Boss First
50. AI Teaching Talk – Ryan@MobileDev.TW 行動開發學院 行動開發學院 敬請指教 Ryan Chung Founder Mobile Development Academy Ryan@MobileDev.TW 50