MCU VR班會(05)記錄

MCU VR應用班 <翻轉式> 線上討論課堂(05)　記錄如下：
—— 舉行時間:　2016/7/15 晚上　20:30 ~ 21:45   

                                              

蘇瑞元:Hi, 大家好
高煥堂:hello
蘇瑞元:今天要討論的是手勢操作設備，是一個很有趣，在VR或AR中也很重要的議題。
蘇瑞元:應該是手勢操作的應用。
高煥堂:瑞元老師，您覺得手勢操作在MCU的日本景點上，如何應用較好?
高煥堂:可分為兩個情境：

     1.來到景點參觀者，帶起頭盔
     2.在校外的咖啡廳，或家庭客廳哩，帶起MCU VR頭盔
蘇瑞元:不要過多的穿戴在VR應用是很重要的
蘇瑞元:我想應該是在茶道練習的時候。
蘇瑞元:轉動茶杯，拿起茶杯品茶的動作。
高煥堂:所以有了VR，就不需要實體泡茶了?
蘇瑞元:另外如果有例如在menu上點餐，menu是虛擬的，直接在menu上勾選。
蘇瑞元:我想實體泡茶還是需要的。因為沒有實體泡茶就沒有實際的茶香的感覺。
高煥堂:所以有了VR，虛擬取代了實體的茶具等
蘇瑞元:但是如果是動作的練習，是可以使用手勢操作
高煥堂:您的目的是教學生泡茶
蘇瑞元:但是這樣的應用，似乎微軟的Hololens還要更適合。
高煥堂:我們想想針對MCU的日本景點，有幾種使用者? 有幾種使用情景?
蘇瑞元:我認為當實體是重要的情境時，Hololens的擴充實境才是正確的工具。
高煥堂:如果使用情境是：在校外的咖啡廳，或家庭客廳哩，帶起MCU VR頭盔
高煥堂:VR就比AR適合多了
高煥堂:在校外的咖啡廳，或家庭客廳哩，帶起MCU VR頭盔，欣賞MCU的虛擬日本景點
蘇瑞元:第一是遠距觀賞銘傳日本景點現場的場景，這時如果和對方討論或介紹哪一個場景，這個手勢就會變得重要，
高煥堂:YES
高煥堂:因為換景點，就可以用手勢；就像戴頭盔來操作電視一般
高煥堂:戴起頭盔，眼睛看到虛擬的電視螢幕畫面
蘇瑞元:其實如果有頭盔，可能就不見得˙需要一台電視，可以將電視內容投射在虛擬場景中。
高煥堂:然後使用手勢來操作電視換channel；但是電視裡有VR頻道，也有一般頻道
高煥堂:如何在VR頻道與一般(非VR)頻道之間轉台操作呢?
蘇瑞元:把電視一般頻道內容投射在VR場景中的一面牆上，就是虛擬的電視了，如果是一般頻道切換，則做手勢時，指切換內容，不切換場景，但是若是VR頻道，則直接切換為VR場景。
高煥堂:操作電視轉台，就如同戴上頭盔觀看MCU的眾多景點，然後用手指來操作變換景點
高煥堂:great

 

蘇瑞元:其實我想如果是一般使用到電腦或是平板的操作，也都可以放到VR中來做
高煥堂:如果情境是：客人來到日本景點，戴起頭盔，進行虛擬泡茶
蘇瑞元:手勢的偵測，可以確定使用者在虛擬螢幕或虛擬鍵盤上的操作。
高煥堂:YES
高煥堂:那就不需要實體的茶具了；因為虛擬茶具的花樣更多，而MCU不可能購買各式各樣的茶具
蘇瑞元:我覺得如果是拿起茶具等展示物體來觀察，是可以用手勢來操作的。
高煥堂:實體物體? 還是虛擬茶具?
呂家賢:如果可以多人同時戴上頭盔在同一個場景上互動，學習效果會更好
蘇瑞元:另外像日本娃娃。
蘇瑞元:是虛擬的物體。

呂家賢:如果可以多人同時戴上頭盔在同一個場景上互動，學習效果會更好
蘇瑞元:另外像日本娃娃。
蘇瑞元:是虛擬的物體。
高煥堂:YES
高煥堂:因為虛擬的茶具、道具很多。許多實體茶具買不到，或已經失傳了
蘇瑞元:不過如果是操作泡茶，則意義不大。
蘇瑞元:所以拿起虛擬物體來賞玩，或是和同伴玩虛擬遊戲，是可以使用手勢操作的。
高煥堂:操作泡茶牽涉到觸覺
高煥堂:此外，味覺很難。偏偏泡茶很講究嗅覺、味覺
蘇瑞元:以目前來說，操作泡茶還是以實體的方式成本會低很多。
高煥堂:所以VR的適用情境必須尋找、設計和創造
hsiyeh hsiyeh:我建議用虛擬的茶具 在空間中可以在旁邊解說如何進行茶道 。 參訪的人就可以現場拿真的杯子進行學習
信宏:有些茶道文化著重於茶道的禮儀，因此訓練茶道的禮儀應該是很適合
高煥堂:信宏，等您呀
信宏:而並非著重於觸覺或味覺
信宏:不好意思，晚到..
高煥堂:信宏，訓練茶道，手勢操控適用嗎?
蘇瑞元:禮儀訓練確實是很適合VR的一種訓練。
信宏:我覺得茶道的禮儀非常適合
高煥堂:現在在福州網龍公司，已經將leap motion配上HTC vive了，取代手柄
蘇瑞元:不過茶道著重在細膩的手部動作，這個部分可能會有些難度。
信宏:訓練過程著重於文化的傳遞而非強調於味覺跟觸覺
蘇瑞元:leap motion現在已經有產品了嗎？
高煥堂:2013年就有了，for PC的
信宏:leap motion結合HTC vive可以加強手勢的細膩度...
高煥堂:LM(Leap Motion)最近已經有for HTC
蘇瑞元:真的有http://store-world.leapmotion.com/
高煥堂:<HTC vive+LM>組合下的Light house激光只由頭盔來接收(沒有手柄了)
高煥堂:最近已經有LM for HTC vive
高煥堂:手套+手指，又如何?
高煥堂:我意思是，將HTC 手炳換成手套
蘇瑞元:戴上手套會比較自然，尤其是做手部細膩的操作時。
高煥堂:手套有傳感器(sensor)，又加上leap motion手勢操控，有如何?
蘇瑞元:手柄只能按按鍵。
高煥堂:現在我們不是三選一
高煥堂:而是要創造新奇的組合：例如<手柄+LM> 、<手套+LM>、<手柄+手套>等等

 

高煥堂:假設技術都OK
高煥堂:那一種適合於MCU的日本景點之旅
蘇瑞元:不過如果要探討這個問題可能要充份瞭解這三者功用上的差異。例如手套和手部偵測，兩者是非常相似的
蘇瑞元:我感覺目前這三者同時應用是有困難的。
蘇瑞元:因為握著手柄，手指就難以空出來做細部的動作。
高煥堂:YES
信宏:HTC Vive搭配基站定位，如果搭配Manus VR手套可以將這樣的日本景點參訪做得很細緻
蘇瑞元:如果以這樣來看LM的技術可能是最適合的，除了其範圍可能是最為受限的一種。
高煥堂:我比較凸顯的不是結果，我比較凸顯的是VR專案的思維方法
高煥堂:先試圖構思最佳組合方法
高煥堂:然後逐一淘汰不可行的
信宏:如果以上述組合技術都可行，手套+LM應該會比較適合
蘇瑞元:假設我們的情境是這樣的：我們首先帶上VR眼鏡，在眼鏡上邀集了幾個朋友一起參觀日本景點
高煥堂:例如，看來<手柄+LM> 、<手套+LM>、<手柄+手套>三種組合，是被我們否決了
蘇瑞元:我想是的，因為使用手柄則無法使用手套和LM
蘇瑞元:手套和LM則功能過於相似，以至於可能使用其中一種即可。
蘇瑞元:在最容易使用的情況下，LM可能是最佳的方法。
高煥堂:以後，我們規劃教材、正是教學生時，我希望能夠凸顯VR的思維方法
高煥堂:會凸顯出我們是有思想、有哲學、有美學基礎的
高煥堂:經過嚴密的思維過程中，大家自己及團隊夥伴都知道選擇方案的過程，及決策的結果
蘇瑞元:不過在大範圍，手的操作有可能不在我們攝影機的範圍內時，就必須使用手套或手柄了。
高煥堂:沒錯
高煥堂:LM視野不夠大
蘇瑞元:例如拉弓射箭的動作。.
高煥堂:但是一邊彈鋼琴，一邊翻樂譜時，只能用手了
蘇瑞元:除非LEAP能設計另一種攝影機，能從遠方觀察，但是這樣的攝影機可能需要具備超高的解析度，並有超高計算力的電腦來處理。
高煥堂:所以，VR專案的交互設計是非常關鍵的
蘇瑞元:不過這樣的科技可能幾年後就不是太大的問題。
信宏:這時候是否比較適合用手套的方式
蘇瑞元:手套看起來在大範圍手部應用就顯得更適合了。
信宏:要識別細部的手指操作部份會比較適合
高煥堂:我們不要試圖找出各手段的適用規則
蘇瑞元:這時候使用HTC的激光加上手套就相當適合。
信宏:恩恩
高煥堂:要引導學生依據實際情境去作好的決策
高煥堂:而不是去應用老師教給他們的規則
蘇瑞元:我想高老師說的應該是目前我們應該要討論在日本景點這個情境下最好的方法。
高煥堂:YES
高煥堂:但是我們所要的是：我們是如何思考、決策而找到方法的
高煥堂:而不是結果而已
蘇瑞元:這個情境應該很少會讓手的操作超過我們的眼睛，所以LM的方法可能最適合。
高煥堂:我建議儘量用刪除法
高煥堂:也就胡適所說的實用主義思維：大膽假設、小心求(否)証。
蘇瑞元:在日本景點的情境中，其中一個是更換場景或在場景中移動，這時可以使用手勢。
高煥堂:例如，<LM+手套+手柄>，為甚麼被我們刪除了呢?
高煥堂:瑞元這個決策是偏於<實證>
蘇瑞元:因為手柄很難和手套或LM同時使用
蘇瑞元:在我們的應用中，需要手的細部變化，故刪除了手柄。
信宏:手柄的動作無法做到細緻的茶具的舉、起，及關節的動作
高煥堂:<<<因為握著手柄，手指就難以空出來做細部的動作。>>> 瑞元這句話就是小心否證了
高煥堂:great

蘇瑞元:手套和LM則相當相似，故兩者可能都可以使用。
高煥堂:在福州網龍公司的老闆，他是一位設計師
高煥堂:網龍公司使用一套他的方法論
高煥堂:其中一個就是窮舉法，
高煥堂:先把可能方案窮舉出來
高煥堂:例如，第一項：<LM+手套+手柄>
高煥堂:第二項：<LM+手柄>
高煥堂:第三項：<LM+手套>
高煥堂:第四項：<手套+手柄>
高煥堂:瑞元、信宏，這些我們都有足夠理由去刪除他們嗎?
蘇瑞元:我想有手柄的都刪除。
高煥堂:我們要逐一把理由說出來
高煥堂:未來我們在MCU推廣VR教學時，我希望把思維過程教出來
蘇瑞元:主要理由是拿起虛擬物體觀察時動作太過複雜
高煥堂:才能凸顯我們課程的靈魂
高煥堂:有人就會反問：那IKEA使用HTC 手柄來展示廚具裝潢
高煥堂:為何表現不錯呢

蘇瑞元:不過思維過程是和應用情境高度相關的，所以未來的教材中需要加入許多情境的探討。
高煥堂:這就逼著大家繼續延續瑞元的思路
高煥堂:對的
蘇瑞元:廚具裝潢是大項的物品，如果要拿的是杯子，茶匙，可能就有困難。
高煥堂:所以情境設計也是我們教學的重點
高煥堂:但是從IKEA的廚房演示中，也能拿一顆蒜頭
高煥堂:沒關係，我們就是要凸顯這個討論的過程
蘇瑞元:另外的可能是成本考量，因為既然使用了HTC Vive，如果多加一個Leap Motion的攝影機，可能大部分使用者都沒有。
蘇瑞元:好的
信宏:應該是這樣的情境如果只是把東西拿起、放下、轉向手柄就足夠
高煥堂:我們不要再走傳統的教學路徑
高煥堂:老師教原則，學生拿原則去應用
蘇瑞元:確實在翻轉教室情境中，許多歐美的老師是要學生去思考的，但許多問題沒有一定的答案。
高煥堂:而是凸顯團隊創新思維的過程
高煥堂:師生一起針對情境而思考與決定
高煥堂:然後共同觀察結果，而後重新修正
高煥堂:好了，晚安囉
蘇瑞元:高老師晚安。
高煥堂:謝謝大家，周末愉快

~ end ~