工業技術研究院

技術簡介

整合臉部表情生成式AI技術與音樂生成結果，將逗趣之表情與音效融入專屬3D人物模型中，透過腳本設計，讓參與互動體驗的民眾可以感受到更豐富有趣之效果，快速提供獨特聲音、影像、互動氛圍的改變，大幅降低修改軟硬體的成本，配合節目或節慶進行服務氛圍的改變，提高來客率與民眾參與度。

Abstract

Integrating facial expression generative AI technology with music generation results, the playful expressions and sound effects are incorporated into a custom 3D character model. Through script design, the interactive experience allows participants to enjoy a richer and more engaging effect, quickly providing unique changes in sound, visuals, and interactive atmosphere. This significantly reduces the costs of modifying software and hardware, while enabling atmosphere changes for programs or events, ultimately increasing visitor traffic and public engagement.

技術規格

(1)智慧生成聲光展演系統 (2)昏暗場域多人動作辨識技術，多人動作偵測，4人與每個人14個以上關節點，環境照明100Lux以上，可解析入動作參數5種以上，生成視覺輸出包含3種可調變參數 (3)串流顯示即時優化技術，顯示解析度達4K與更新率20FPS以上

Technical Specification

’(1) Intelligent Sound and Light Generation System (2) Multi-Person Motion Recognition in Low-Light Environments: Detection of movements for up to 4 individuals, each with more than 14 joint points. Operating in environments with illumination above 100 Lux, capable of analyzing over 5 motion parameters. Visual output generation includes 3 configurable parameters. (3) Real-time Streaming Optimization Technology: Display resolution of up to 4K with a refresh rate of 20 FPS or greater.

技術特色

整合臉部表情生成式AI技術與音樂生成結果，將逗趣之表情與音效融入專屬3D人物模型中，透過腳本設計，讓參與互動體驗的民眾可以感受到更豐富有趣之效果，快速提供獨特聲音、影像、互動氛圍的改變，大幅降低修改軟硬體的成本，配合節目或節慶進行服務氛圍的改變，提高來客率與民眾參與度。

應用範圍

虛實科技用餐體驗產業、餐飲旅遊展演產業、宮廟互動顯示產業、會展或藝文展演、影視產業

接受技術者具備基礎建議（設備）

a) 光機組裝與系統測試設備 b) 個人電腦

接受技術者具備基礎建議（專業）

a) 軟體設計能力 b) 光機設計能力 c) 具系統整合設計開發能力更佳

聯絡資訊