【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
VCool AI 食譜應用 App。

許多科技發明的最初往往都是以一個最微小的念頭開始:「這樣好辛苦,要怎麼讓他更好用?」、「這個問題困擾我好久,有什麼方法可以解決?」,而年輕學子不受限的創意念頭更是往往讓人出乎意料的驚喜表現,這也是為什麼許多科技大廠每年都投入大量資源在培育/贊助新一代學生的創意科技比賽。蘋果在每年的 WWDC 開發者大會中,除了推出眾多新軟體應用外,也聚集了全世界的頂尖蘋果 App 的開發人員進行交流,蘋果每年也會邀請參加 WWDC 學生挑戰賽(Swift Student Challenge)的獲獎團隊,到美國參加 WWDC 跟業界的開發者進行交流,透過接觸第一線產業開發者,讓學生能接觸更貼近業界的開發技術與思考路徑,進而在未來能有更實際的應用。

這幾年蘋果也在台灣持續推動科技教育,包括跟台大合作成立蘋果區域培訓中心,透過台大本身的課程與工作坊、Swift Coding Club 社團等活動與組織,搭配蘋果最新的軟硬體技術,提供學生們發揮自身創意、解決問題的工具平台,也透過講座提供學生包括產學合作、跨平台開發、功能最佳化、甚至是商業模式創新與國際發展等向前推進的力量,而這次蘋果就邀請了三組參加 MAIC 行動應用創新賽的獲獎學生團隊來跟媒體分享,來看看他們如何透過蘋果的軟硬體技術,將自己在腦海中的想法化成現實。

iMirror:沉浸式鏡像復健系統

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有

首先是獲得今年 MAIC 一等獎的 iMirror Lab 團隊所開發的 iMirror 沉浸式鏡像復健系統,透過 Apple Vision Pro 的高精度手部追蹤以及高解析度的顯示影像,提供過往需要特定場域才能進行的中風復健鏡像治療功能,透過遊戲化的復健設計場景,不僅讓中風復健治療更加有趣易用,而且透過 Apple Vision Pro 的高精度手部追蹤功能,結合 HealthKit 的健康數據,讓過往大多靠復健師經驗判讀的復健療程,有了更科學化的追蹤指標,可以讓復健師更容易評估患者的復健狀態。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
進行解說的是 iMirror Lab 成員中的錢泓瑞,目前是臺大資訊網路與多媒體研究所的博士生,他表示計畫的主要動機是團隊成員中的家中長輩中風,組員為了找尋更好的治療方法而做了這個計畫。而鏡像治療其實是復健治療中相當常見的項目,主要讓患者在鏡子前移動正常側的肢體,透過鏡像反射出另一側肢體的動作視覺,進而讓腦部持續對癱瘓側的肢體進行神經訓練的復健方式。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
簡單的鏡像訓練方式示意。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
不過過往鏡像訓練多半需要特定的場合(像上面的圖那樣,至少要有大面的鏡子跟相關輔助設施)才能進行,而 iMirror 沉浸式鏡像復健系統主要透過 Apple Vision Pro 的高解析度顯示以及高精度的手部追蹤功能,讓半邊肢體具備障礙的中風患者,可以透過虛擬鏡像的方式來訓練腦部對於障礙肢體的控制,畫面中其實只有右手是使用者真實的手,左側是 iMirror 沉浸式鏡像復健系統在 Apple Vision Pro 中虛擬出來的影像。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
而為了要讓枯燥訓練更加有趣,讓患者持續復健,iMirror 沉浸式鏡像復健系統也加入了遊戲化的復健課程,像是接球大師、舉重大師、爆破愛心大師、節奏大師等,透過簡單的抓取、拋接動作,來訓練使用者的腕關節屈曲/伸展、手指屈身以及雙臂舉起等動作。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
像是上圖那樣透過雙手拍拍卡皮巴拉的小腦袋這類的動作,讓患者可以利用更有趣的活動進行復健。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
Apple Vision Pro 精密的手部追蹤功能,則是供給 iMirror 沉浸式鏡像復健系統更精細的手部運動幅度測量,透過 Apple Foundation Model 針對手部關節的追蹤與辨識,在 iMirror 沉浸式鏡像復健系統還可以提供復健運動前後的手部運動幅度測量,提供給復健師過去較難量化的復健成效評估。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
透過追蹤功能,復健師可以在系統中檢視患者在鏡像復健治療前後的手部運動改善幅度。錢泓瑞也表示未來還可以透過持續豐富遊戲內容與系統化復健流程增加這套功能的效果,或是跟醫院復健科合作,推動相關的臨床測試。

《晴境 Clear》:沈浸式療癒應用

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
第二組同學是台大 Swift Coding Club 所推出的《晴境 Clear》沈浸式療癒應用,透過 Apple Watch 等穿戴裝置偵測日常生活中累積的壓力指數,進而在 Apple Vision 中打造出可讓使用者透過語音、手勢互動以及回憶照片,理解自身內在狀態、獲得支持陪伴的虛擬場景。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
《晴境 Clear》的開發團隊【大衛傑思鮭魚麵】,還有一位成員沒有上台。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
團隊表示主要的開發原因是因為台大學生的壓力真的太大了,每個學期從開學後 3 周到期末考前,學校心理衛生中心的諮商師預約都一直爆滿,為了讓沒辦法預約到諮商師的同學也能獲得心理釋放/情緒療癒的效果,所以想出開發這個應用的念頭。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
《晴境 Clear》主要是透過 Apple Watch 等穿戴裝置,針對使用者的 HRV(心率變異性)進行測量來評估使用者的壓力狀態。HRV 是衡量身體壓力與恢復狀況的重要指標之一,透過測量連續心跳之間微小的時間間隔變化,HRV 值較高通常代表身體放鬆,能應對壓力;HRV 值較低則表示身體處於壓力或緊繃狀態,需要休息與恢復,而系統就會針對測量的數值建立一個『每日情緒報告』,可以顯示使用者的短期壓力以及長期壓力狀態,並且提供相關建議。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
《晴境 Clear》除了進行壓力指數的偵測外,主要的功能還是透過 Apple Vision Pro 的顯示與操作,在迷霧森林的虛擬場景中,透過語音與手勢撥開雲霧、看見回憶,達到心理釋放的目的。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
使用者在進入虛擬場景後,可以跟場景中的虛擬角色對話,系統會分析數據與對話內容產生今日的情緒報告,進而產生對應的虛擬空間,讓使用者沉浸在這個空間中達到心理放鬆的療癒感受。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
在療癒空間中還會顯示讓使用者心情愉快的個人回憶影像,來幫助使用者。

《VCook》:AI生成個人化食譜與更方便的煮飯流程


【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有

第三組同學則是在第10屆行動應用創新賽台灣總決賽得到最佳創新獎的 VCook,是一款依據個人健康數據與偏好,利用 AI 生成客製化食譜的 App,協助學生與上班族簡化烹飪流程,搭並且透過升級後的介面設計,提高使用者的使用便利度。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
VCook 的開發者中原大學資訊工程學系的江竑燁同學,才大一而已!而且 VCook 目前也已經正式上架到蘋果 App Store 提供下載訂閱。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
這個 App 的發想原因也一樣很貼近日常:下班/下課後要吃什麼?怎麼可以吃得更健康?更省錢?(這個才是主要原因吧.....)

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
VCook 的主要介面,會依照目前的時間、使用者運動量、健康狀態等資料來推出建議食譜。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
在新的設計中,VCook 結合了類似蘋果 Apple Intelligence 的介面,可以把下方想吃的食物類型、飲食偏好拖曳到上面的圓圈中,透過 Apple Intelligence 的 Foundation model 即時進行食譜內容的生成。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
生成食譜的結果畫面,就連上面的配圖都是透過 AI 生成的,下方還可以讓使用者選擇所要烹煮的分量,進行對應的調整。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
食譜的步驟畫面,同樣的配圖也是透過 AI 生成的。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
烹飪過程中的畫面則是導入了計時器功能,提供了更簡化的指示,另外也可以透過 Siri 進行語音控制,方便烹飪時不方便使用手指進行觸控操作時,仍然可以利用語音檢視食譜步驟。

【採訪】展現台灣學生的超強科技創意!蘋果分享 MAIC 行動應用創新賽得獎作品 從中風復健/心理療癒到 AI 食譜通通有
VCook 也提供了烹調前的食材購買清單,並且具備份量提示方便使用者決定要買多少量。
感謝分享&介紹,同學們的實力都很棒
AI真的越來越強了~
全球已經全面進入AI時代
這些學生看起來很厲害
有想法 不錯
我眼殘以為是志棋77


有研發....Ai大模型.…否?
ai帶入感越來越多了
陳拔 wrote:
VCool AI 食...(恕刪)

讚喔

不知道哪個科系的
陳拔 wrote:
VCool AI 食...(恕刪)


學生創意需要被發掘~加油!
文章分享
評分
評分
複製連結

今日熱門文章 網友點擊推薦!