直播平台怎麼搭建直播特效，實現原理與難點是什麼

實現直播特效的流程如下：

在完成影象的處理後，按照合適位元速率、格式進行編碼。

最後，推流到 cdn。

要實現美顏效果，不論是基於 webrtc 的移動端還是web端，都可以通過 gpuimage 來實現。如果是基於 webrtc 與 react native、gpuimage 相結合即可，不過需要修改 react-native-webrtc 的原始碼。

在直播中實現特效、濾鏡，甚至ar特效的例子，我們可以在網上找到很多，我們也曾分享過基於 arcore、arkit 來實現。不過其中有很多需要開發者注意的難點。

一、缺乏可擴充套件性、靈活性

二、需要大量修改原始碼

通過 webrtc 的 native api 是無法獲取攝像頭資料的，如果要做美顏，需要做大量改動，比如上述提到的修改 react-native-webrtc 原始碼，也只是其中一部分工作。另外可能還需要調整 webrtc 原始碼，並不是拿來即用，這就要求開發者要熟悉 webrtc。

三、效能與功耗問題

在編碼上也存在相同問題。軟體編碼的優點是靈活度高，但是缺點是功耗高，影響效能。硬體編碼則相對速度更快、功耗更低，是更優的選擇。但它的問題在於，能做的優化和引數調整，取決於硬體廠商開放的介面。而且硬體編碼在部分 android 手機上的相容性也存在問題。

四、硬體相容性問題

webrtc 等自研方案還需要考慮硬體的相容性問題。ios 裝置相對簡單，但是在 android 裝置上，不同晶元、系統版本等因素，存在相容問題。

直播平台怎麼搭建直播特效，實現原理與難點是什麼

公升級2.1版之前：

在2.1之前的版本中，開發者需要通過 pushexternalvideosource 介面，以共享texture id 的方式來實現特效、美顏等功能，即需要傳入texture 所在的 egl context，以及texture 的id。

公升級2.1之後：

直播平台怎麼搭建直播特效，實現原理與難點是什麼