chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

OpenHarmony 3.2 Beta多媒體系列——音視頻播放框架

OpenAtom OpenHarmony ? 來源:未知 ? 2022-11-21 21:35 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

點擊藍字 ╳ 關(guān)注我們


開源項目 OpenHarmony
是每個人的 OpenHarmony

巴延興

深圳開鴻數(shù)字產(chǎn)業(yè)發(fā)展有限公司

資深OS框架開發(fā)工程師


以下內(nèi)容來自嘉賓分享,不代表開放原子開源基金會觀點

一、簡介

媒體子系統(tǒng)為開發(fā)者提供一套接口,方便開發(fā)者使用系統(tǒng)的媒體資源,主要包含音視頻開發(fā)、相機開發(fā)、流媒體開發(fā)等模塊。每個模塊都提供給上層應(yīng)用對應(yīng)的接口,本文會對音視頻開發(fā)中的音視頻播放框架做一個詳細的介紹。

二、目錄

foundation/multimedia/media_standard
├── frameworks                        #框架代碼
│ ├── js
│ │ ├── player
│ ├── native
│ │ ├── player #native實現(xiàn)
│ └── videodisplaymanager #顯示管理
│ ├── include
│ └── src
├── interfaces
│ ├── inner_api #內(nèi)部接口
│ │ └── native
│ └── kits #外部JS接口
├── sa_profile #服務(wù)配置文件
└── services
├── engine #engine代碼
│ └── gstreamer
├── etc #服務(wù)配置文件
├── include #頭文件
└── services
├── sa_media #media服務(wù)
│ ├── client #media客戶端
│ ├── ipc #media ipc調(diào)用
│ └── server #media服務(wù)端
├── factory #engine工廠
└── player #player服務(wù)
├── client #player客戶端
├── ipc #player ipc調(diào)用
└──server#player服務(wù)端

三、播放的總體流程



四、Native接口使用

OpenHarmony系統(tǒng)中,音視頻播放通過N-API接口提供給上層JS調(diào)用,N-API相當(dāng)于是JS和Native之間的橋梁,在OpenHarmony源碼中,提供了C++直接調(diào)用的音視頻播放例子,在foundation/multimedia/player_framework/test/nativedemo/player目錄中。
void PlayerDemo::RunCase(const string &path)
{
player_ = OHOS::CreatePlayer();
if (player_ == nullptr) {
cout << "player_ is null" << endl;
return;
}
RegisterTable();
std::shared_ptr cb = std::make_shared();
cb->SetBufferingOut(SelectBufferingOut());


int32_t ret = player_->SetPlayerCallback(cb);
if (ret != 0) {
cout << "SetPlayerCallback fail" << endl;
}
if (SelectSource(path) != 0) {
cout << "SetSource fail" << endl;
return;
}
sptr producerSurface = nullptr;
producerSurface = GetVideoSurface();
if (producerSurface != nullptr) {
ret = player_->SetVideoSurface(producerSurface);
if (ret != 0) {
cout << "SetVideoSurface fail" << endl;
}
}
SetVideoScaleType();
if (SelectRendererMode() != 0) {
cout << "set renderer info fail" << endl;
}
ret = player_->PrepareAsync();
if (ret != 0) {
cout << "PrepareAsync fail" << endl;
return;
}
cout << "Enter your step:" << endl;
DoNext();
}
首先根據(jù)RunCase可以大致了解一下播放音視頻的主要流程,創(chuàng)建播放器,設(shè)置播放源,設(shè)置回調(diào)方法(包含播放過程中的多種狀態(tài)的回調(diào)),設(shè)置播放顯示的Surface,這些準備工作做好之后,需要調(diào)用播放器的PrepareASync方法,這個方法完成后,播放狀態(tài)會變成Prepared狀態(tài),這時就可以調(diào)用播放器的play接口,進行音視頻的播放了。
RegisterTable()方法中,將字符串和對應(yīng)的方法映射到Map中,這樣后續(xù)的DoNext會根據(jù)輸入的命令,來決定播放器具體的操作。
void PlayerDemo::DoNext()
{
std::string cmd;
while (std::cin, cmd)) {
auto iter = playerTable_.find(cmd);
if (iter != playerTable_.end()) {
auto func = iter->second;
if (func() != 0) {
cout << "Operation error" << endl;
}
if (cmd.find("stop") != std::npos && dataSrc_ != nullptr) {
dataSrc_->Reset();
}
continue;
} else if (cmd.find("quit") != std::npos || cmd == "q") {
break;
} else {
DoCmd(cmd);
continue;
}
}
}


void PlayerDemo::RegisterTable()
{
(void)playerTable_.emplace("prepare", std::bind(&Player::Prepare, player_));
(void)playerTable_.emplace("prepareasync", std::bind(&Player::PrepareAsync, player_));
(void)playerTable_.emplace("", std::bind(&Player::Play, player_)); // ENTER -> play
(void)playerTable_.emplace("play", std::bind(&Player::Play, player_));
(void)playerTable_.emplace("pause", std::bind(&Player::Pause, player_));
(void)playerTable_.emplace("stop", std::bind(&Player::Stop, player_));
(void)playerTable_.emplace("reset", std::bind(&Player::Reset, player_));
(void)playerTable_.emplace("release", std::bind(&Player::Release, player_));
(void)playerTable_.emplace("isplaying", std::bind(&PlayerDemo::GetPlaying, this));
(void)playerTable_.emplace("isloop", std::bind(&PlayerDemo::GetLooping, this));
(void)playerTable_.emplace("speed", std::bind(&PlayerDemo::GetPlaybackSpeed, this));
}
以上的DoNext方法中核心的代碼是func()的調(diào)用,這個func就是之前注冊進Map中字符串對應(yīng)的方法,在RegisterTable方法中將空字符串""和"play"對綁定為Player::Play方法,默認不輸入命令參數(shù)時,是播放操作。

五、調(diào)用流程

左右滑動查看更多


本段落主要針對媒體播放的框架層代碼進行分析,所以在流程中涉及到了IPC調(diào)用相關(guān)的客戶端和服務(wù)端,代碼暫且分析到調(diào)用gstreamer引擎。
首先Sample通過PlayerFactory創(chuàng)建了一個播放器實例(PlayerImpl對象),創(chuàng)建過程中調(diào)用Init函數(shù)。
int32_t PlayerImpl::Init()
{
playerService_ = MediaServiceFactory::GetInstance().CreatePlayerService();
CHECK_AND_RETURN_RET_LOG(playerService_ != nullptr, MSERR_UNKNOWN, "failed to create player service");
return MSERR_OK;
}
MediaServiceFactory::GetInstance()返回的是MediaClient對象,所以CreateplayerService函數(shù)實際上是調(diào)用了MediaClient對應(yīng)的方法。
std::shared_ptr MediaClient::CreatePlayerService()
{
std::lock_guard lock(mutex_);
if (!IsAlived()) {
MEDIA_LOGE("media service does not exist.");
return nullptr;
}


sptr object = mediaProxy_->GetSubSystemAbility(
IStandardMediaService::MEDIA_PLAYER, listenerStub_->AsObject());
CHECK_AND_RETURN_RET_LOG(object != nullptr, nullptr, "player proxy object is nullptr.");


sptr playerProxy = iface_cast(object);
CHECK_AND_RETURN_RET_LOG(playerProxy != nullptr, nullptr, "player proxy is nullptr.");


std::shared_ptr player = PlayerClient::Create(playerProxy);
CHECK_AND_RETURN_RET_LOG(player != nullptr, nullptr, "failed to create player client.");


playerClientList_.push_back(player);
return player;
}
這個方法中主要通過PlayerClient::Create(playerProxy)方法創(chuàng)建了PlayerClient實例,并且將該實例一層層向上傳,最終傳給了PlayerImpl的playerService_變量,后續(xù)對于播放器的操作,PlayerImpl都是通過調(diào)用PlayerClient實例實現(xiàn)的。
int32_t PlayerImpl::Play()
{
CHECK_AND_RETURN_RET_LOG(playerService_ != nullptr, MSERR_INVALID_OPERATION, "player service does not exist..");
MEDIA_LOGW("KPI-TRACE: PlayerImpl Play in");
return playerService_->Play();
}


int32_t PlayerImpl::Prepare()
{
CHECK_AND_RETURN_RET_LOG(playerService_ != nullptr, MSERR_INVALID_OPERATION, "player service does not exist..");
MEDIA_LOGW("KPI-TRACE: PlayerImpl Prepare in");
return playerService_->Prepare();
}


int32_t PlayerImpl::PrepareAsync()
{
CHECK_AND_RETURN_RET_LOG(playerService_ != nullptr, MSERR_INVALID_OPERATION, "player service does not exist..");
MEDIA_LOGW("KPI-TRACE: PlayerImpl PrepareAsync in");
return playerService_->PrepareAsync();
}
對于PlayerImpl來說,playerService_指向的PlayerClient就是具體的實現(xiàn),PlayerClient的實現(xiàn)是通過IPC的遠程調(diào)用來實現(xiàn)的,具體地是通過IPC中的proxy端向遠端服務(wù)發(fā)起遠程調(diào)用請求。
我們以播放Play為例:
int32_t PlayerClient::Play()
{
std::lock_guard lock(mutex_);
CHECK_AND_RETURN_RET_LOG(playerProxy_ != nullptr, MSERR_NO_MEMORY, "player service does not exist..");
return playerProxy_->Play();
}
int32_t PlayerServiceProxy::Play()
{
MessageParcel data;
MessageParcel reply;
MessageOption option;


if (!data.WriteInterfaceToken(PlayerServiceProxy::GetDescriptor())) {
MEDIA_LOGE("Failed to write descriptor");
return MSERR_UNKNOWN;
}


int error = Remote()->SendRequest(PLAY, data, reply, option);
if (error != MSERR_OK) {
MEDIA_LOGE("Play failed, error: %{public}d", error);
return error;
}
return reply.ReadInt32();
}
proxy端發(fā)送調(diào)用請求后,對應(yīng)的Stub端會在PlayerServiceStub::OnRemoteRequest接收到請求,根據(jù)請求的參數(shù)進行對應(yīng)的函數(shù)調(diào)用。播放操作對應(yīng)的調(diào)用Stub的Play方法。
int32_t PlayerServiceStub::Play()
{
MediaTrace Trace("binder::Play");
CHECK_AND_RETURN_RET_LOG(playerServer_ != nullptr, MSERR_NO_MEMORY, "player server is nullptr");
return playerServer_->Play();
}
這里最終是通過playerServer_調(diào)用Play函數(shù)。playerServer_在Stub初始化的時候通過PlayerServer::Create()方式來獲取得到。也就是PlayerServer。
std::shared_ptr PlayerServer::Create()
{
std::shared_ptr server = std::make_shared();
CHECK_AND_RETURN_RET_LOG(server != nullptr, nullptr, "failed to new PlayerServer");


(void)server->Init();
return server;
}
最終我們的Play調(diào)用到了PlayerServer的Play()。在媒體播放的整個過程中會涉及到很多的狀態(tài),所以在Play中進行一些狀態(tài)的判讀后調(diào)用OnPlay方法。這個方法中發(fā)起了一個播放的任務(wù)。
int32_t PlayerServer::Play()
{
std::lock_guard lock(mutex_);


if (lastOpStatus_ == PLAYER_PREPARED || lastOpStatus_ == PLAYER_PLAYBACK_COMPLETE ||
lastOpStatus_ == PLAYER_PAUSED) {
return OnPlay();
} else {
MEDIA_LOGE("Can not Play, currentState is %{public}s", GetStatusDescription(lastOpStatus_).c_str());
return MSERR_INVALID_OPERATION;
}
}


int32_t PlayerServer::OnPlay()
{
auto playingTask = std::make_shared>([this]() {
MediaTrace::TraceBegin("PlayerServer::Play", FAKE_POINTER(this));
auto currState = std::static_pointer_cast(GetCurrState());
(void)currState->Play();
});


int ret = taskMgr_.LaunchTask(playingTask, PlayerServerTaskType::STATE_CHANGE);
CHECK_AND_RETURN_RET_LOG(ret == MSERR_OK, ret, "Play failed");


lastOpStatus_ = PLAYER_STARTED;
return MSERR_OK;
}
在播放任務(wù)中調(diào)用了PlayerServer::Play()
int32_t PlayerServer::Play()
{
return server_.HandlePlay();
}
在Play里面直接調(diào)用PlayerServer的HandlePlay方法,HandlePlay方法通過playerEngine_調(diào)用到了gstreamer引擎,gstreamer是最終播放的實現(xiàn)。
int32_t PlayerServer::HandlePlay()
{
int32_t ret = playerEngine_->Play();
CHECK_AND_RETURN_RET_LOG(ret == MSERR_OK, MSERR_INVALID_OPERATION, "Engine Play Failed!");


return MSERR_OK;
}

六、總結(jié)

本文主要對OpenHarmony 3.2 Beta多媒體子系統(tǒng)的媒體播放進行介紹,首先梳理了整體的播放流程,然后對播放的主要步驟進行了詳細地分析。
媒體播放主要分為以下幾個層次:

(1)提供給應(yīng)用調(diào)用的Native接口,這個實際上通過OHOS::CreatePlayer()調(diào)用返回PlayerImpl實例。

(2)PlayerClient,這部分通過IPC的proxy調(diào)用,向遠程服務(wù)發(fā)起調(diào)用請求。

(3)PlayerServer,這部分是播放服務(wù)的實現(xiàn)端,提供給Client端調(diào)用。

(4)Gstreamer,這部分是提供給PlayerServer調(diào)用,真正實現(xiàn)媒體播放的功能。





原文標題:OpenHarmony 3.2 Beta多媒體系列——音視頻播放框架

文章出處:【微信公眾號:OpenAtom OpenHarmony】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 鴻蒙
    +關(guān)注

    關(guān)注

    60

    文章

    2740

    瀏覽量

    45030
  • OpenHarmony
    +關(guān)注

    關(guān)注

    31

    文章

    3891

    瀏覽量

    20197

原文標題:OpenHarmony 3.2 Beta多媒體系列——音視頻播放框架

文章出處:【微信號:gh_e4f28cfa3159,微信公眾號:OpenAtom OpenHarmony】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    音視頻開發(fā)全棧解析

    Media Kit 讓開發(fā)者可以調(diào)用系統(tǒng)的音視頻能力,涵蓋播放、錄制、錄屏、元數(shù)據(jù)提取與轉(zhuǎn)碼六大核心功能模塊,支撐系統(tǒng)應(yīng)用與第三方應(yīng)用在視頻播放、內(nèi)容創(chuàng)作、教學(xué)錄屏、直播互動等典型場景
    的頭像 發(fā)表于 09-18 14:42 ?341次閱讀
    <b class='flag-5'>音視頻</b>開發(fā)全棧解析

    一款面向便攜式多媒體應(yīng)用的高品質(zhì)立體聲數(shù)模轉(zhuǎn)換器 (DAC) 芯片

    便攜式多媒體播放器(Portable Media Player),簡稱PMP,是集音視頻播放、圖片瀏覽與數(shù)據(jù)存儲功能于一體的手持設(shè)備。
    的頭像 發(fā)表于 09-04 10:00 ?470次閱讀
    一款面向便攜式<b class='flag-5'>多媒體</b>應(yīng)用的高品質(zhì)立體聲數(shù)模轉(zhuǎn)換器 (DAC) 芯片

    花椒直播首次開源推流器組件 為鴻蒙開發(fā)者提供高性能推流解決方案

    器。該工具基于花椒直播自主通用多媒體框架HJMedia打造而來,采用創(chuàng)新的通用多媒體框架設(shè)計,以高度模塊化、可擴展的插件化架構(gòu),極大提升了音視頻
    的頭像 發(fā)表于 09-04 09:52 ?411次閱讀
    花椒直播首次開源推流器組件 為鴻蒙開發(fā)者提供高性能推流解決方案

    千視電子受邀亮相2025音視頻產(chǎn)業(yè)鏈研討會,引領(lǐng)全鏈路音視頻IP化新趨勢

    2025年8月22日,由中國電子音響行業(yè)協(xié)會和湖南省工業(yè)和信息化廳聯(lián)合主辦的“2025音視頻產(chǎn)業(yè)鏈發(fā)展研討暨對接會”在長沙舉行?;顒訁R聚音視頻產(chǎn)業(yè)鏈上下游企業(yè),以及長沙市相關(guān)政府領(lǐng)導(dǎo)與行業(yè)
    的頭像 發(fā)表于 08-27 11:33 ?736次閱讀
    千視電子受邀亮相2025<b class='flag-5'>音視頻</b>產(chǎn)業(yè)鏈研討會,引領(lǐng)全鏈路<b class='flag-5'>音視頻</b>IP化新趨勢

    泰芯半導(dǎo)體推出星閃音視頻無線SOC芯片TXW828

    在短距離無線通信技術(shù)加速迭代的浪潮中,珠海泰芯半導(dǎo)體有限公司全球首先發(fā)布支持星閃(NearLink)標準的音視頻無線SOC芯片——TXW828。這款集WiFi/藍牙BLE/星閃三模融合音視頻無線芯片
    的頭像 發(fā)表于 06-20 15:51 ?1945次閱讀

    樂鑫ESP-RTC實時音視頻通信方案

    ESP-RTC樂鑫科技推出ESP-RTC(Real-TimeCommunication)音視頻通信方案,能夠?qū)崿F(xiàn)穩(wěn)定流暢、超低延時的語音和視頻實時通信。ESP-RTC以樂鑫
    的頭像 發(fā)表于 05-26 18:07 ?912次閱讀
    樂鑫ESP-RTC實時<b class='flag-5'>音視頻</b>通信方案

    中國音視頻產(chǎn)業(yè)邁向高質(zhì)量發(fā)展

    隨著超高清先鋒計劃的逐步推進,截至2024年底,中國音視頻產(chǎn)業(yè)規(guī)模超5萬億,包括個人消費電子、家庭影音娛樂、行業(yè)多媒體應(yīng)用及車載視聽產(chǎn)業(yè)和相關(guān)衍生應(yīng)用等行業(yè)企業(yè)超過百萬家,音視頻產(chǎn)業(yè)已經(jīng)成為國家數(shù)字經(jīng)濟發(fā)展的重要支柱。
    的頭像 發(fā)表于 04-24 11:10 ?918次閱讀

    音視頻一體化解決方案

    。在應(yīng)急指揮中心、多媒體會議室、移動指揮車、多媒體教室、數(shù)字法庭等場景中,用戶亟需一套高度集成、智能管控、互聯(lián)互通的一體化解決方案,以實現(xiàn)音視頻信號的綜合調(diào)度與高效協(xié)作。
    的頭像 發(fā)表于 04-24 09:14 ?706次閱讀

    實用調(diào)試技能:全志T113-i 音視頻測試

    前言:音視頻功能是現(xiàn)代嵌入式系統(tǒng)中的核心應(yīng)用之一,尤其在全志T113-i開發(fā)板中,其豐富的音視頻接口為開發(fā)者提供了強大的開發(fā)能力。本篇文章將帶你快速掌握T113-i平臺下音視頻模塊的調(diào)試技能,通過
    的頭像 發(fā)表于 03-06 08:31 ?2007次閱讀
    實用調(diào)試技能:全志T113-i <b class='flag-5'>音視頻</b>測試

    【北京迅為】itop-3568 開發(fā)板openharmony鴻蒙燒寫及測試-第2章OpenHarmony v3.2-Beta4版本測試

    【北京迅為】itop-3568 開發(fā)板openharmony鴻蒙燒寫及測試-第2章OpenHarmony v3.2-Beta4版本測試
    的頭像 發(fā)表于 03-05 10:53 ?708次閱讀
    【北京迅為】itop-3568 開發(fā)板<b class='flag-5'>openharmony</b>鴻蒙燒寫及測試-第2章<b class='flag-5'>OpenHarmony</b> v<b class='flag-5'>3.2-Beta</b>4版本測試

    RK628H:高端音視頻處理與傳輸芯片詳解

    RK628H是一款集高清音視頻處理與傳輸功能于一體的高端芯片,專為滿足現(xiàn)代多媒體設(shè)備對高分辨率、高幀率視頻以及高質(zhì)量音頻的需求而設(shè)計。其強大的音視頻處理能力和多樣化的輸入輸出接口,使得
    的頭像 發(fā)表于 02-10 17:56 ?1786次閱讀

    RK3588核心板多媒體功能一覽

    前言:RK3588支持8K視頻編碼和解碼,以及多路視頻源同時解碼,為視頻處理和多媒體應(yīng)用提供了強大的支持,本文則從音視頻兩個功能測試上來認識
    的頭像 發(fā)表于 12-12 08:31 ?2648次閱讀
    RK3588核心板<b class='flag-5'>多媒體</b>功能一覽

    AMS-HE200:HDMI音視頻網(wǎng)絡(luò)延長器,開啟傳輸新時代

    在數(shù)字化時代,高清音視頻傳輸已經(jīng)成為各行各業(yè)不可或缺的重要技術(shù)。無論是安防監(jiān)控、視頻會議,還是戶外廣告、家庭影院,高清音視頻信號的無縫傳輸都扮演著至關(guān)重要的角色。深圳市程達科技有限公司,作為高清
    的頭像 發(fā)表于 11-27 10:04 ?851次閱讀
    AMS-HE200:HDMI<b class='flag-5'>音視頻</b>網(wǎng)絡(luò)延長器,開啟傳輸新時代

    如何在音頻播放時插播音頻

    ZDP14x0系列芯片是內(nèi)置開源GUI引擎的圖像顯示專用驅(qū)動芯片,內(nèi)部集成16MB/64MB顯示內(nèi)存、2D圖形加速器、音視頻解碼器等豐富多媒體功能。不僅支持音視頻
    的頭像 發(fā)表于 11-25 15:40 ?1570次閱讀
    如何在音頻<b class='flag-5'>播放</b>時插播音頻

    Amoonsky創(chuàng)新音視頻連接技術(shù):全新推出AMS-HE200 HDMI網(wǎng)線延長器

    簡介: 在不斷向高清多媒體體驗邁進的世界中,強大的音視頻連接需求變得前所未有的重要。AMS-HE200,Amoonsky開創(chuàng)性的HDMI網(wǎng)線延長器,成為重新定義音視頻網(wǎng)絡(luò)格局的解決方案。這款創(chuàng)新
    的頭像 發(fā)表于 10-24 16:09 ?721次閱讀
    Amoonsky創(chuàng)新<b class='flag-5'>音視頻</b>連接技術(shù):全新推出AMS-HE200 HDMI網(wǎng)線延長器