數位藝術與互動設計實驗室 Digital Arts & Interaction Design Lab

1. DDLab 簡介
數位藝術與互動設計實驗室
Digital Arts &
Interaction Design Lab

2. 共 45 頁
我是鏘鏘 林豪鏘
 國立清華大學資訊科學博士, 1997
 國立臺南大學｜數位學習科技系．教授兼系主任
 台灣科技藝術教育協會．理事長
 台灣科技藝術學會．副理事長
 中華民國數位內容學會．常務理事
 中華民國資訊管理學會．理事
 科技部創新學習軟體設計主題研究群．召集人
 ISAC中華民國大專校院資訊服務協會．理事
 數位藝術與互動設計實驗室主持人
 國立臺南大學．學務長
 國立臺北商業大學．設計學院．院長
 中華民國視覺藝術協會．理事
 現代詩人．藝術家．藝術觀點總編輯
 藝術所 (美術系)．所長．資訊長
 網路行銷叢書作者
 棒球評論網路作家
 網站流行音樂業餘樂評
 人工智慧社群網站創站站長 (Since 1995)
 台北數位藝術獎評審．網路藝術組召集人
 國際新媒體藝術節．策展人
DDLab
22019/8/12
工程
商管
教育
藝術

3. 共 45 頁
DDLab 鏘鏘
 鏘鏘的研究領域
 情感運算．數位藝術．擴增實境．虛擬實境
 人工智慧．互動設計．自然語言
 大數據之情緒分析與文字探勘
 網路行銷．電子商務．數位學習
 跨界．跨領域
 從事數位內容之相關活動：
創作．科技．行銷
2019/8/12 3

4. 【情感運算】這門課
 108上學期
 日碩、日博、碩專
 一門很人工智慧的課
 讓電腦認識情緒
是一件愈來愈重要的有趣事情。
 情感運算：一門讓電腦認識情緒的學問
 可以透過文字、表情、生理訊號等
2019/8/12 共 45 頁 4

5. 教材豐富
 會用到的教材：
 情感運算鼻祖Picard教授唯一的專書
 華文第一本情感運算專書
 鏘鏘自編教材
 情感運算學習網
 混成式遠距情感運算 1know 翻轉學習網站
 微軟Azure雲端平台實機操作
2019/8/12 共 45 頁 5

6. 情感運算課程無比精彩
 情感運算課程將無比精彩
 除預計新增許多2019最新教材，
 還將加入實作課程，
讓學生體驗透過 微軟Azure雲端平台
來進行機器學習設計，
設計情緒分類器。
 文字情緒分析
 表情分析
 聊天機器人設計
 機器學習設計
2019/8/12 共 45 頁 6

7. 2019/8/12 共 45 頁 7

8. 2019/8/12 共 45 頁 8

9. 2019/8/12 共 45 頁 9

10. 2019/8/12 共 45 頁 10

11. 主講：微軟 Azure 認證講師：
Mason 鄭老師
2019/8/12 共 45 頁 11

12. DDLab簡介
2019/8/12 共 45 頁 12

13.  DDLab目前已培育：
 8位大學專任教授
 5位國小專任教師
2019/8/12 共 45 頁 13

14. 運用於音樂欣賞課程
2019/8/12 共 45 頁 14
AI 情感式學習系統

15. 2019/8/12 共 45 頁 15

16. 12/08/2019 共 143 頁 16

17. 12/08/2019 共 143 頁 17

18. 12/08/2019 共 143 頁 18

19. 未來世界：人類與機器人共存的社會
 學生與軟體機器人合作學習
12/08/2019 共 143 頁 19

20. AI 情感式對話機器人Chatbot
在合作討論群組裏的角色
 控制組：
 無Chatbot
 實驗組-1：
 有Chatbot默默提供學習鷹架
 實驗組-2：
 有Chatbot介入聊天與討論、
進行情緒辨識
2019/8/12 共 45 頁 20

21. 用到的 AI 技術
深度學習
CNN
LSTM
萊文斯坦距離法
2019/8/12 共 45 頁 21

22. 2019/8/12 共 45 頁 22

23. 12/08/2019 共 143 頁 23

24. 12/08/2019 共 143 頁 24

25. 12/08/2019 共 143 頁 25

26. 研究發現
Chat-bot正面影響
 反思能力
 批判性思考能力
 創造力
 問題解決能力
 積極參與學習
 凝聚力與向心力
 正向情緒 (僅主動式)
Chat-bot非正面影響
 不影響領域知識的建構
 高認知負荷
 容易感到疲乏
 難以掌握學習脈絡
26

27. 實現康丁斯基學說

28. 色彩與音樂之聯覺的研究無數，早在17世紀中，英國
物理學家牛頓 (Sir Isaac Newton,1642-1727)即以
光譜色認定紅、橙、黃、綠、藍、青、紫、七種顏色，
相當於C、D、E、F、G、A、B七個音。聯覺
可見光譜
康丁斯基

29. 控制器 繪製線條產生音樂
隨機演奏9種樂器
Piano,Violin,Cello,Brass,Flute,
Oboe, Xylophone,Choir,Orchestra
觸擊球體產生節奏
隨機變換10種打擊樂器2019/8/12 共 45 頁 29

30. 2019/8/12 共 45 頁 30

31. 2019/8/12 共 45 頁 31

32. AR 實作工作坊
Quiver, Aurasma,
Augment
10/30/15 IDOLS SIG 共 37 頁
謝旻儕教授
華人第一本AR專書
32

34. A R 梅花鹿互動拍照
2019/8/12 共 45 頁 34

35. AR桌遊 遊戲設計
配件
• 地圖X1
• 機會籤X32
• 命運籤X10
• 題目卡X45
• 鑑定書X1
• 人物X6(多的備用)
• 聖筊X1組
• 骰子X1顆
• 籤筒X2組(機會、命運)
• 舉牌X1個
• 牆面拼圖X4張
主要遊戲對象：香客、遊客、學生、16~70歲的使用者
人數：２～５人
2019/8/12 共 45 頁 35

36. 活動畫面
2019/8/12 共 45 頁 36

37. 《醫，無所知》
健康教育AR桌遊地圖
2019/8/12 共 45 頁 37

38. 《醫，無所知》一般健康教育桌遊 Get ahead medical knowledge/
38
研
究
方
法
與
設
計
ResearchMethod
八個科別耳鼻喉科、家
醫科、婦產科、泌尿科
、血液腫瘤科、神經科
、胃腸肝膽科及胸腔科
等共56題。其答案於背
面。
用來抽機會命運
卡的膠囊，膠囊
內分別有一張小
籤，打開並找到
對應名稱的卡牌
。
棋子為遊戲中用
來代表每位玩家
，骰子為決定玩
家前進之步數道
具。

39. 39
將題目卡放置檢查報告書上的欄位中，
再將搜尋畫面對準整張報告書，
即會出現該題檢查結果與說明資訊。
研
究
方
法
與
設
計
ResearchMethod

40. 實驗過程
40
控制組遊玩情形 實驗組遊玩情形
研
究
方
法
與
設
計
ResearchMethod

41. 2019/8/12 共 45 頁 41

42. 運用ZUVIO在
英語教學之研究
無比感謝教務處和電算中心把學校課務系統
和Zuvio即時回饋系統互連了
3 教學創新課程 + 3 SSCI Paper

43. Research: using IRS to promote interaction
during the class in the flipped learning context
 IETI, Innovations in Education and Teaching International (SSCI)
 Flipped learning practices face increasing pressure on the effectiveness of the
implementation, as it has significantly transformed pedagogical practices.
Although this pedagogical approach has become increasingly popular over the
last 10 years, certain challenges to implementation have inevitably arisen. In this
study, a learning activity based on the Interactive Response System (IRS) using a
pair-and-share (PS-IRS) strategy is proposed for helping students achieve optimal
use of target language, thus bridging the pre-class and in-class contexts in flipped
learning. A sequence of PS-IRS activities were created for the study, and the
activities were delivered in a collaborative manner in each of the lessons in order
to assist students in English language learning. An experiment was conducted to
assess the effectiveness of this approach in the context of an English as a foreign
language (EFL) course at a university. A total of 85 university students participated
in the experiment, 45 assigned to the experimental group and learned with the PS-
IRS approach, and 40 in the control group and learned with a teacher-led (TL-IRS)
learning method. Results indicate that the PS-IRS approach provides effective
interactive learning opportunities that promote students’ willingness to
communicate (WTC) and reduce their learning anxiety. This study builds on
existing discussion of integrated-IRS teaching strategies in the literature and
extends it into the context of the flipped language classrooms.
2019/8/12 共 45 頁 43
Zuvio + 合作分享

44. 2019/8/12 共 45 頁 44
一組教師導引，
一組學生合作式
透過ZUVIO分享

45. (a)Out-of-class learning: Learners
offering their feedbacks on ZUVIO
(b) In-class learning :
1) discussion in random chosen pairs
2019/8/12 45共 45 頁
結果：ZUVIO組的交流意願提升，學習焦慮降低

46. STEAM 6E 學習鷹架+合作學習
進行數位藝術作品創作
2019/8/12 共 45 頁 46

47. STEAM 6E 實驗流程
老師先播放AR運用之影片為開端，引起學生的興趣。
翻轉教學為主，讓學生以自發性態度先上網了解AR擴增實
境原理與技術，並收集相關資料於討論區與同學討論。
老師講解AR擴增實境原理與技術，讓學生更了解與釐清問
題。
運用文宣APP來設計AR圖卡並列印輸出
運用手機錄影程式，錄製3分鐘自我介紹
運用HP Reveal將影片與AR圖卡結合
以問題討論方式讓學生對所學有更深度的探討，以能解決
更深入複雜的問題
同儕互評
E1 投入
E2 探索
E3 解釋
E4 建造
E5 豐富
E6 評量
ST
STE
STE
STEA
STEAM
STEAM
2019/8/12 共 45 頁 47

48. 2019/8/12 共 45 頁 48

49. 12/08/2019 共 143 頁 49
組內
組間

50. 互動式視覺藝術結合聲音創作之研究
The Creation of Interactive Visual Art with Sound

51.  Processing＋Leap Motion／Kinect
→創作出兩樣不同的作品讓使用者能有
不一樣的操作互動
＋
＋
→
→
2019/8/12 共 45 頁 51

52. 2019/8/12 共 45 頁 52

53. 2019/8/12 共 45 頁 53

54. 詩、影像、數位．美學越界－林豪鏘個展 (意念 誌)

55. 2019/8/12 共 45 頁 55

56.  以台南大學紅樓建築物為目標
 原型評估與測試，需製作兩個模型減低
誤差
 電腦模型
 小型等比縮放實體模型
原型設計
562019/8/12 共 45 頁

57. 共 45 頁
DDLab鏘鏘
 興趣多元化：
 寫作 (現代詩．散文．小說．評論．網路文學)、
繪畫 (美工設計．漫畫製作)、
歌唱、流行音樂、電影、
保齡球、網球、慢跑、棒球、髮型
2019/8/12 57