1. 程式人生 > 實用技巧 >愛奇藝論文被ACM MM會議接收,開放卡通人物資料集開啟卡通智慧識別新世代

愛奇藝論文被ACM MM會議接收,開放卡通人物資料集開啟卡通智慧識別新世代

近日,愛奇藝關於卡通人物識別與檢測技術的論文《Cartoon Face Recognition: A Benchmark Dataset》被國際頂級學術會議——國際計算機學會多媒體會議(ACM Multimedia)接收,進一步獲得國際頂級學術組織認可。論文提出的卡通人物識別基準資料集iCartoonFace是目前全球最大的手工標註卡通人物資料集,將有效推動卡通識別領域技術突破,開啟面向卡通內容的智慧識別新世代。

論文連結:https://dl.acm.org/doi/abs/10.1145/3394171.3413726

ACM Multimedia是計算機多媒體技術領域的國際頂級學術會議,致力於推動全球範圍內包括影象、文字、音訊、感測器等方向的技術研究及應用。

目前,針對真人人臉識別的技術演算法和應用日趨成熟,而卡通人物識別領域尚處於起步階段,同時卡通識別技術的需求場景正隨著動漫產業的發展迅速增長。除了面向視訊的結構化分析,卡通人物識別技術也在圖片搜尋、廣告識別等場景有著大量使用需求。然而,卡通人物的複雜程度和顏色紋理多樣性都遠超真人人臉,並存在類間差異小類內差異大的情況,這些複雜分佈的資料決定了卡通人物識別的難度和挑戰性都遠遠大於真人人臉識別。卡通資料集是實現卡通識別技術突破與應用的關鍵。絕大部分現有的卡通識別資料集存在著資料量小、噪聲比例大的問題。在此次入選的論文中,愛奇藝技術團隊提出了全新卡通真人相結合的多人物訓練框架,半自動資料集構建框架,以及目前全球最大的手工標註卡通人物檢測資料集與識別資料集iCartoonFace。該資料集包含超過5000個卡通人物、40萬張以上的高質量實景圖片。iCartoonFace資料集不僅能應用於針對視訊的結構化分析和智慧剪輯,還能應用於圖片搜尋、廣告識別等場景,連惡搞諷刺漫畫、卡通風格的人物等都進行辨識稽核,滿足不斷變化增長的卡通人物檢測與識別需求。

iCartoonFace與其他已有卡通資料集的對比

目前,基於iCartoonFace資料集的卡通識別技術已經應用至愛奇藝多個創新業務與功能:AI服務中臺支援自動蒐集卡通人物素材,智慧生成符合主題的混剪視訊;通過AI識別功能“奇觀”,使用者可一鍵識別動漫作品中的卡通人物。

愛奇藝始終致力於研究前沿技術發展,並探索新技術在娛樂領域的應用。過去兩年,愛奇藝已成功舉辦兩屆多模態視訊人物識別挑戰賽,推動多模態人物識別精準度大幅提升;今年,愛奇藝聯合IJCAI PRICAI 2020共同舉辦國內首個大規模卡通人物識別競賽,已經面向參賽者開放iCartoonFace卡通資料集資源,吸引了來自包括北京大學、復旦大學、浙江大學、上海交通大學、中國科學院大學等頂尖高校,以及阿里巴巴、騰訊、百度、京東、商湯科技等知名企業在內的近500支團隊踴躍參與,進一步推動了卡通人物識別領域技術發展,併為技術與內容的深度融合拓展了更加豐富的場景。未來,愛奇藝將繼續加強科研創新,不斷探索技術賦能的下一代應用與體驗。

也許你還想看

ACM MM2020 | 一個卡通人臉識別的基準資料集

公開課 | 多模態人物識別技術及其在愛奇藝視訊場景中的應用

掃一掃下方二維碼,更多精彩內容陪伴你!