長庚大學宣布推動全新階段的數位學習專案,引進 16 台專用運算設備,為校內各門課程打造能理解課堂脈絡的專屬數位助教。這項計畫著重於解決學生使用一般雲端聊天工具時,答案容易偏離教學範圍或與課程進度不符的困境。
解決通用 AI 痛點:「時間點感知」精準對接教學現場
傳統的通用型大型語言模型(LLM)雖然能回答廣泛問題,但在高等教育或專業學科的學習上,往往因無法掌握特定學術章節與老師的講授重點,給出過於寬泛甚至不符合課綱的資訊。為打破這項限制,校方開發的 AI 助教並非直接連結外部雲端服務,而是全面整合課程的全學期影音紀錄、語音逐字稿、簡報投影片與參考文獻,實現「一門課、一助教」的客製化模式。
這項系統的核心優勢在於具備「時間點感知(Time-aware Context)」技術。當學生在觀看課程教學影片並按下暫停提問時,系統會自動定位該時間點前後的講義頁面與對話紀錄,精準掌握學生當下的學習情境,無需學生額外翻找教材或重新複製內文,就能提供最符合課堂原意的解答。
地端部署克服三大挑戰:保護智慧財產與高流量運算
在將數位助教全面落地的過程中,技術團隊面臨了三大考驗。首先是必須整合數十小時的影音、語音轉文字與龐大講義等跨模態資料;其次是考量考前衝刺期等熱門時段,大量學生同時線上發問所產生的瞬間爆量推論需求;最後則是教師的原創教材與學生個人學習歷程屬於敏感資產,必須符合資訊安全與個人資料保護規範。
為了解決運算瓶頸與資安風險,校方選擇攜手硬體廠商,在校內直接建置私有化的地端算力叢集。透過引進搭載專用超級晶片與 128 GB 統一記憶體(Unified Memory)的伺服器,讓系統可以在不連結外部公有雲的情況下,於校內獨立運行高達數千億參數規模的大型開源模型,確保教學資源「不出校」,同時提供快速不卡頓的即時問答體驗。
給家長與老師
對於家長與教師而言,這項技術落地展示了人工智慧在教育領域從單純「代為搜尋解答」轉向「個別化精準伴學」的重大轉變。過往學生盲目依賴通用 AI 聊天機器人時,容易因為缺乏判斷力而吸收錯誤或過於艱深的資訊;而透過具備課堂脈絡的客製化系統,能幫助學生在安全的框架內進行高效率的自主學習。
教師可以將此概念運用於未來的教學設計中,嘗試運用領域專用的生成式 AI 工具來協助重整教材,不僅能減輕助教重複回答基礎問題的負擔,也能讓學生獲得更符合教學目標的輔導。家長則可以引導孩子了解,AI 工具的使用價值不在於直接獲取標準答案,而是在於如何透過精準的提問與情境對齊,深化對特定主題的理解。
學習小教室
- 檢索增強生成(Retrieval-Augmented Generation, RAG):一種結合搜尋技術與語言模型的架構。AI 在產生回答前,會先去設定好的內部資料庫中搜尋正確文件,再根據這些資料生成回應,能大幅降低 AI 憑空捏造資訊的情況。
- 地端部署(On-Premise Deployment):指將軟體系統與運算設備直接建置在機構內部的機房,而非租用外部雲端廠商的服務。優點是資料控制權與隱私安全性極高,個人與機密資料不會外流。
- 統一記憶體(Unified Memory):一種讓中央處理器(CPU)與圖形處理器(GPU)共用相同記憶體空間的硬體設計,能減少資料在不同晶片間搬移的時間,大幅提升處理巨量影片或大型模型的運算效率。
常見問題
什麼是「時間點感知」技術?
這是一種能精準記錄學生觀看教學影片暫停時間點的技術,系統會自動對照當時的講義章節與語音內容,提供極度貼合當下教學語境的解答。
為什麼 AI 助教需要採用地端部署而非使用免費雲端 AI?
地端部署能防止教師的原創教材與學生的學習隱私外洩,同時在多人同時連線時提供更穩定且快速的運算效能。
通用型 AI 與課堂專屬 AI 助教有何不同?
通用型 AI 容易給出超出課綱或偏離老師講述重點的回答;專屬 AI 助教則會完全依據該門課程的講義、影片與進度來輔導學生。
