本文來源電子發(fā)燒友社區(qū)，作者：羈傲不馴， 帖子地址：https://bbs.elecfans.com/jishu_2305045_1_1.html


眾所周知，RK平臺(tái)的視頻接口與通用Linux視頻接口有略微出入，不能兼容，如Opencv不能使用標(biāo)準(zhǔn)V4L2接口打開攝像頭、編解碼使用mpp框架等。

但是RK也將自己所作的工作對(duì)其到常用的LInux 開源軟件上，比如gstreamer、ffmpeg等，熟悉這些的朋友可以參考RK的文檔開使用如上接口可以快速進(jìn)行視頻相關(guān)通路的開發(fā)。

什么是rockit？有什么作用？

rockit是rockchip多媒體處理平臺(tái)對(duì)外應(yīng)用接口。它提供了兩種對(duì)外框架。分別是mpi和tgi。

Rockit定位于通用媒體pipeline, 將常用媒體組件插件化，以積木化的方式構(gòu)建靈活的應(yīng)用pipeline。開發(fā)者借助Rockit可以開發(fā)豐富的媒體應(yīng)用。

rockit框架的具有以下特性：

• 穩(wěn)定的操作接口抽象。
• 穩(wěn)定的媒體接口抽象。將平臺(tái)媒體接口轉(zhuǎn)換為通用媒體接口。
• 穩(wěn)定的插件抽象。
• 支持通用插件管理(TaskGraph)。插件組裝，數(shù)據(jù)傳遞和控制等。
• 支持多種媒體應(yīng)用開發(fā)。

也就是它可以像gstreamer一樣，通過插件合理的控制每一個(gè) 系統(tǒng)的數(shù)據(jù)流向，從而進(jìn)行多媒體應(yīng)用的開發(fā)。鑒于tgi傾向于多媒體應(yīng)用場景開發(fā)，我們本次只為作為一個(gè)小小的例子，調(diào)用剝離開來的mpi接口來實(shí)現(xiàn)一個(gè)簡單的demo開發(fā)。

MPI接口將板卡中所的音視頻處理器及設(shè)備均抽象出來：

該平臺(tái)整合了RK的硬件資源，對(duì)應(yīng)用軟件屏蔽了芯片相關(guān)的復(fù)雜的底層處理，并對(duì)應(yīng)用軟件直接提供接口完成相應(yīng)功能。該平臺(tái)支持應(yīng)用軟件快速開發(fā)以下功能：輸入視頻捕獲、H.265/H.264/JPEG 編碼、H.265/H.264/JPEG 解碼、視頻輸出顯示、視頻圖像前處理（包括裁剪、縮放、旋轉(zhuǎn)）、智能、音頻捕獲及輸出、音頻編解碼等功能

它的系統(tǒng)架構(gòu)如下：

兩種典型應(yīng)用場景中分別如下：


下面介紹一下我的項(xiàng)目：我的項(xiàng)目是一個(gè)典型的IPC項(xiàng)目：
BedRockJie/Rockchip_camera_encoder_Networkput (github.com)

實(shí)現(xiàn)在RK平臺(tái)上對(duì)Video的采集編碼并推流的過程，可以在桌面VLC中拉流播放顯示攝像頭畫面，具體代碼實(shí)現(xiàn)可以看倉庫中：vi_encoder_push

下期介紹如何快速使用和上手創(chuàng)建自己的項(xiàng)目(基于RK框架或剝離框架自己玩)