
TL;DR:把 AI 客服從網頁帶到現場。訪客在 iPad 上開口或打字,大電視同步顯示角色和回答,排隊和路過的人也看得到。
實際畫面

電視只負責展示,操作都在 iPad。這張是目前版本的電視畫面,回答來自水行者在 AICMS 的知識庫。

遇到場館資料裡沒有的問題,角色會直接說明,並引導訪客找真人。
現場怎麼運作
| 裝置 | 負責的事 |
|---|---|
| iPad | 訪客用觸控或語音提問,工作人員也在這裡切換設定 |
| 電視 | 用 HDMI 接在 iPad 上,展示角色、問題與回答,聲音走電視喇叭 |
| AICMS 後台 | 場館維護知識庫,改完下一位訪客問到的就是新答案 |
功能
- 四種語言:中英日韓,點一下就切換,語音辨識和角色聲線一起換
- 3D 角色:說話時嘴型同步,有表情和手勢,可以換角色,也能做品牌專屬角色
- 只用場館的資料回答:問答走 AICMS 知識庫,機台本身不帶任何 AI 金鑰
- 情境切換:場館導覽、商品解說、百貨店家推薦、店面導覽,招呼語和快捷主題跟著換
- 地點推薦:開通後回覆會帶地點卡片和導航 QR
- 工作人員面板:現場就能換角色、背景、電視方向與回答語言
- 直式與橫式電視:電視直立掛時,畫面內容會自己轉向
- 隱私:閒置一段時間自動回待機,並清空對話
開發重點
- 一份核心,兩個 App:機台和 iPhone 版共用同一份 Tauri 2 專案,打包時切換 target
- 雙畫面同步:iPadOS 預設只會鏡像畫面,我們在 Rust 層開第二個視窗,同步走本機迴路,不依賴網路
- 備援傳輸:不用 HDMI 時也能走區網或雲端頻道,斷線會自動重連並補送最後狀態
- 機台授權:每台機台用專屬金鑰連上 AICMS,開通與切換場館都有管理流程
目前狀態
已在 iPad 實機跑通,HDMI 接電視也實測可用,問答接上 AICMS 正式環境。目前是 Beta,硬體方案與導入方式請看機台官網 ↗。
想在自己的場域放一台,或做不同形式的互動裝置,歡迎來聊。