10月24日,相芯科技在RTE2020上正式發布新一代AR視頻特效SDK。相芯科技致力于打造XR內容的創作和互動平臺,此次發布的新一代AR視頻特效SDK開放20余項AR視頻特效能力全面賦能開發者,并依靠這些基礎能力和相互疊加的組合玩法形成一套完整的AR視頻解決方案。涵蓋人臉、人體技術應用方向的全面能力矩陣、整合相芯科技AI+AR的多種能力、更加易用的平臺工具和完善的售前售后服務體系,為開發者與行業合作伙伴提供了高效、低成本的內容制作服務,助力合作伙伴實現業務創新并創造巨大的用戶價值。
AR特效能力覆蓋廣
激發內容創作新玩法
在移動互聯網快速更迭中成長起來的年輕用戶來說,用視頻創作與交流已經是一種生活常態,隨著5G的逐步商用化,基于超高清、低時延、高互動的沉浸式視頻業務場景不斷產生和演化,將成為視頻行業的主力軍。AR視頻特效已經成為了視頻創作過程中體現個性化的不可缺少的工具之一。
相芯科技自2016年開始就不斷為開發者更新迭代AR視頻特效解決方案,到如今已經形成一套玩法豐富、性能優異的成熟產品線。相芯科技的AR視頻特效SDK提供豐富的特效玩法,如美顏美型、人像濾鏡、美妝美發、美體瘦身、AR道具貼紙、綠幕摳像、表情和手勢交互、背景分割、搞笑大頭、虛擬形象面部驅動、虛擬形象全身驅動等,覆蓋行業的主流AR特效。極大地提高了人像拍攝的美感與藝術感,提升了視頻拍攝的互動感和趣味性。
AI讓你更美
底層算法優化帶來性能大升級
新一代AR視頻特效SDK,是基于實時人臉跟蹤、人體跟蹤、人像分割、手勢識別等深度學習技術打造的AR視頻特效解決方案,提供了行業內非常全面的AR特效能力。
其中算法能力包括人臉關鍵點、人臉表情動作檢測、3D人臉模型重建、2D人體關鍵點、3D人體骨骼、人像分割、頭部分割、頭發分割、手勢識別等。在人臉特效方面,相芯提供多達241個五官稠密點,尤其是對于嘴部和眼部這兩個最"出戲"的部位,相芯提供了更加精準的點位,以保障應用層可實現更多的玩法。同時我們提供56個人臉表情系數以及25點全身人體關鍵點,能夠實現虛擬形象從面部到全身的實時驅動,效果靈活逼真有趣。此外,人像分割、頭部分割、頭發分割等技術能精確地進行輪廓實時識別,且邊緣清晰;15種人體動作識別以及14種手勢識別,帶來更多實時交互方式,極大地擴大了用戶創作空間。
在性能上,此次新版的AR視頻特效SDK,對底層算法進行全面優化,性能顯著升級SDK穩定性更好。美顏性能升級,美顏功能集成到第三方后,即使使用4年前的低配機型,在長時間運行的情況下,能夠依然保證流暢;優化手勢識別性能,Android端的CPU占有率下降了30%以上,iOS端下降50%以上;優化SDK包增量,其中人臉特效版SDK的iOS包增量約3.2M,Android約4.4M;同時PC端的底層性能也進一步優化,多項功能性能提升,比如美顏美妝性能提升10%,美體、綠幕摳像性能提升30%。
相芯科技對SDK整體性能進行大幅度優化,好看的不僅僅是數據,這背后意味著開發者在使用SDK時能夠觸及更多用戶群體,滿足更廣泛的用戶使用場景。
專業技術服務+創意工具
打造完備的售前售后服務
相芯科技的SDK支持iOS、Android、PC、Mac、 Unity等主流平臺,能靈活適用于各類業務場景,相芯還提供行業內數十家音視頻廠商集成示例,對接上手快且成功率高。同時相芯科技擁有一支專業的技術支持團隊,提供全天候的服務,快速響應,輔助對接,完善的售前售后服務在行業內有口皆碑。
此外,針對不同需求的視頻制作者,相芯科技開放FU Creator編輯器,讓具有創意即使能力的平臺開發者可以應用工具進行AR特效的定制化生產、打包、實時調試,輕松創作自己特有的AR特效。FU Creator支持2D/3D貼紙、Animoji、AR面具、美妝、背景分割等十余種特效的自定義,同時可使用微笑、眨眼、比心、點贊等15種表情和15種手勢來設置特效觸發方式,設置個性化的特效故事線,確保開發者可以自主高效地進行能力和玩法擴展。
豐富業務場景,助力行業前行
相芯科技是全球智能圖形領域的創新追求者。我們深耕于計算機圖形和人工智能核心技術的融合與創新,為客戶提供XR內容生產與互動的解決方案。目前,相芯科技的AR視頻特效SDK已服務于上千家B端客戶,廣泛應用于智能手機、直播短視頻、虛擬社交、在線教育、新零售等眾多場景。
AR視頻特效作為XR領域的內容創作形式之一,正在得到全民化的普及。憑借高超的全棧圖形技術,并依托與浙江大學合作成立的"浙江大學-相芯科技智能圖形計算聯合實驗室",相芯科技正加速推動智能圖形技術在XR領域的普及應用,打破XR內容生產桎梏,重塑XR內容互動體驗。不斷豐富XR內容的業務場景,助力行業前行。
來源:京客網快報