教AI看偶像劇!KKStream與台大產學合作受國際關注

教AI看偶像劇!KKStream與台大產學合作受國際關注

KKBOX 集團旗下影音串流服務技術公司 KKStream 與台大產學合作,開發「Stiller」智慧劇照挑選系統,透過線上影音服務 KKTV支援劇庫資料,整合影像識別與視覺感知,讓 AI學會判斷如何挑選吸引目光的精彩劇照,有效提升影片點擊播放,同時減少過往耗時耗力的人工作業流程。

研究成果大放異彩,獲得國際知名學會 IEEE (國際電機電子工程師學會)邀請,由陳宏銘教授與曹竣寧同學於 3月28日前往在美國加州聖荷西舉辦的國際會議(International Conference on Multimedia Information Processing and Retrieval )發表。

KKStream 總裁 蔡怡仁表示:「無論是校園招募與實習計畫,還是剛於3月中舉辦的 Taipei Video Technology 串流產業沙龍,KKStream 持續投入資源,經營軟體技術社群以及人才培育。非常感謝台灣大學的積極響應,透過產學合作讓學術研究與產業應用創造出更多可能性。KKStream 擁有接軌世界最先進的影音串流技術與頂尖人才,經由跨領域的交流,相信能激發更多科技創新應用。」

台灣大學多媒體處理及通信實驗室 陳宏銘教授表示:「台大和 KKBOX 集團已經有多年產學合作經驗,很高興 KKStream 能提供先進的影音串流平台給我們的研究團隊實習,適時結合學術理論於產業實作中,才能獲得成功。多媒體科技在影音串流時代的重要性絕對有目共睹,學術研發促進產業發展,正是產學交流的初衷!」

參與系統設計及發表的同學曹峻寧表示:「感謝教授和 KKStream 的指導,這次開發的『Stiller』 智慧劇照挑選系統,結合關鍵影格擷取 (Key-Frame Extraction) 與影像美感評估 (Image Aesthetic Assessment) 兩大技術,因此可從影片中挑選兼備代表性與吸引力之劇照。透過 AI,Stiller系統只需三集,就能用演算法判斷出男女主角,進而自動擷取精彩影集劇照,希望未來能有機會延續研究,開發出自動剪輯預告,甚至做出濃縮影片的成果,讓 AI 不只看見畫面、還能看懂影片。」

教AI看偶像劇!KKStream與台大產學合作受國際關注

本次產學合作的研究專題是視訊理解 (Video Understanding),透過 KKStream 和影片管理團隊訪談討論,聚焦到影片劇照挑選的實務應用,從臉部表情到動作場景,透過不同的面向來強化 AI 對視訊理解的能力,現階段能夠判讀出重要影片情境並進行劇照挑選,平均每集影片只需60秒就能完成劇照擷取,大幅縮減原本由美術人員逐格截圖的作業時間,並藉由劇照達成吸睛效果,提升影迷點擊播放的意願。未來 Stiller 系統除了運用在偶像劇外,也持續朝延伸到不同類型的影片類型發展。

Hsuann
作者

T客邦特約編輯 ,負責產業即時報導、資訊整理

使用 Facebook 留言
發表回應
謹慎發言,尊重彼此。按此展開留言規則