|
近期，騰訊會(huì)議與聯(lián)發(fā)科技宣布達(dá)成戰(zhàn)略合作，聯(lián)合推出了基于天璣平臺(tái)的虛擬背景功能，創(chuàng)新將虛擬背景技術(shù)與強(qiáng)大的AI算力相結(jié)合，開(kāi)創(chuàng)了移動(dòng)端會(huì)議的新紀(jì)元。這一版本運(yùn)行于天璣移動(dòng)平臺(tái)的NPU，使得會(huì)議體驗(yàn)不僅更加智能化和高效，同時(shí)在安全性上也有了顯著提升。此次軟硬件生態(tài)的聯(lián)合優(yōu)化，為用戶(hù)帶來(lái)了全新的會(huì)議方式，也為業(yè)內(nèi)AI應(yīng)用的進(jìn)一步探索提供了寶貴的實(shí)踐案例。 在本次合作中，聯(lián)發(fā)科技的天璣移動(dòng)平臺(tái)為虛擬背景功能提供了強(qiáng)大的AI性能底座。天璣移動(dòng)平臺(tái)面向智能手機(jī)、平板電腦等移動(dòng)設(shè)備，擁有高智能、高性能、高能效、低功耗卓越特性。最新發(fā)布的天璣9400集成聯(lián)發(fā)科技第八代 AI 處理器 NPU 890，提供遠(yuǎn)超以往的AI 性能和能效。此外，天璣9400 還支持時(shí)域張量（Temporal Tensor）硬件加速技術(shù)、端側(cè)高畫(huà)質(zhì)視頻生成技術(shù)，強(qiáng)勁的端側(cè)Stable Diffusion性能，不僅能夠?qū)崿F(xiàn)高分辨率生圖，更支持端側(cè)動(dòng)圖和視頻生成，實(shí)現(xiàn)更多創(chuàng)新玩法。 
【聯(lián)發(fā)科技天璣9400移動(dòng)平臺(tái)集成先進(jìn)的AI 處理器 NPU 890】 騰訊會(huì)議的虛擬背景功能是一種基于人像分割技術(shù)的運(yùn)用，在進(jìn)行視頻會(huì)議時(shí)，騰訊會(huì)議將自動(dòng)識(shí)別參會(huì)人，并將參會(huì)人周?chē)沫h(huán)境替換為指定圖像或視頻 ，在對(duì)參會(huì)人員進(jìn)行隱私保護(hù)的同時(shí)，也提升了會(huì)議趣味。虛擬背景功能還可以取代布展背景墻，可有效節(jié)約會(huì)議成本。 此次騰訊會(huì)議基于天璣移動(dòng)平臺(tái)NPU上實(shí)現(xiàn)的AI人像分割技術(shù)，采用了自建的多樣性數(shù)據(jù)集，涵蓋了豐富多樣的人物樣本和場(chǎng)景環(huán)境，以確保能夠在各種實(shí)際應(yīng)用場(chǎng)景中實(shí)現(xiàn)穩(wěn)定而精準(zhǔn)的人像分割。同時(shí)在模型設(shè)計(jì)上，騰訊會(huì)議追求輕量化和高計(jì)算性?xún)r(jià)比，采用先進(jìn)的卷積神經(jīng)網(wǎng)絡(luò)架構(gòu)，并結(jié)合注意力機(jī)制與重參數(shù)化等技術(shù)，確保用戶(hù)無(wú)論使用何種設(shè)備，都能享受到流暢且準(zhǔn)確的人像分割體驗(yàn)。
【騰訊會(huì)議APP端-虛擬背景設(shè)置】 此次雙方的深度合作，共同針對(duì)模型在GPU架構(gòu)和NPU架構(gòu)的運(yùn)行能力進(jìn)行了協(xié)同優(yōu)化，顯著提升了處理速度和能效表現(xiàn)，為用戶(hù)提供了更加流暢和高效的體驗(yàn)。 聯(lián)發(fā)科技不僅在芯片硬件層面提供了強(qiáng)大的NPU算力支持，還為騰訊會(huì)議提供了天璣AI開(kāi)發(fā)套件NeuroPilot軟件工具和API。通過(guò)聯(lián)發(fā)科技的一站式軟件解決方案NeuroPilot，為騰訊會(huì)議提供了模型量化、轉(zhuǎn)換、編譯和集成的完整工具鏈（SDK/API/Document），使之可在天璣移動(dòng)平臺(tái)上高效開(kāi)發(fā)和部署基于神經(jīng)網(wǎng)絡(luò)的AI應(yīng)用程序，極大簡(jiǎn)化了騰訊會(huì)議基于AI的應(yīng)用程序開(kāi)發(fā)步驟。 為了讓模型網(wǎng)絡(luò)中更多計(jì)算運(yùn)行在高性能的天璣移動(dòng)平臺(tái)NPU，騰訊會(huì)議對(duì)自研模型中的自定義模塊進(jìn)行調(diào)整和替換，以充分發(fā)揮天璣移動(dòng)平臺(tái)NPU的AI性能。此外，雙方還共同設(shè)計(jì)模型最大并行度，以進(jìn)一步提升AI應(yīng)用在天璣移動(dòng)平臺(tái)NPU上的執(zhí)行效率。經(jīng)雙方聯(lián)合優(yōu)化，虛擬背景功能運(yùn)行在天璣移動(dòng)平臺(tái)NPU的版本相對(duì)CPU FP16模式版本性能提升可達(dá)3.5倍至4倍，耗時(shí)也縮短到6毫秒內(nèi)。同時(shí)，降低功耗還有助于減少手機(jī)發(fā)熱，為長(zhǎng)時(shí)間會(huì)議提供更好的續(xù)航保障。 騰訊會(huì)議智能應(yīng)用研發(fā)中心負(fù)責(zé)人左小祥表示：長(zhǎng)期以來(lái)，除了通過(guò)AI算法在軟件層優(yōu)化性能，騰訊會(huì)議與芯片設(shè)計(jì)廠商積極合作，探索在硬件層提升性能與優(yōu)化用戶(hù)體驗(yàn)的更多可能。本次與聯(lián)發(fā)科技的合作，憑借天璣移動(dòng)平臺(tái)強(qiáng)大的AI算力支持，將騰訊會(huì)議的AI人像分割模型遷移至天璣AI引擎上運(yùn)行，AI算法運(yùn)行更快的同時(shí)，還大幅降低算法的CPU占用，節(jié)省更多CPU資源。騰訊會(huì)議將持續(xù)發(fā)力AI技術(shù)應(yīng)用的前沿探索，并在軟硬件生態(tài)的更多合作中，為用戶(hù)打造更優(yōu)開(kāi)會(huì)體驗(yàn)，目前，騰訊會(huì)議已經(jīng)在天璣9400、天璣9300、天璣9200、天璣9000等多個(gè)平臺(tái)上線(xiàn)虛擬背景的端側(cè)NPU版本。歡迎廣大使用天璣移動(dòng)平臺(tái)設(shè)備的用戶(hù)下載騰訊會(huì)議APP，體驗(yàn)高效AI加持的開(kāi)會(huì)模式。 聯(lián)發(fā)科技與騰訊會(huì)議的深度合作展示了軟硬件協(xié)同的巨大潛力，尤其是在移動(dòng)端AI算力的應(yīng)用場(chǎng)景中取得了令人矚目的成果。雙方的合作不僅提升了用戶(hù)的實(shí)際體驗(yàn)，也為未來(lái)更多功能的拓展和技術(shù)創(chuàng)新奠定了堅(jiān)實(shí)的基礎(chǔ)。隨著合作的深入，聯(lián)發(fā)科技與騰訊會(huì)議將持續(xù)推動(dòng)更智能的會(huì)議解決方案，在天璣平臺(tái)上為用戶(hù)帶來(lái)卓越的會(huì)議體驗(yàn)。 |
