Qt音視頻開發23-通用視頻控制項

2020-09-05 Qt自定義控制項

一、前言

在之前做的視頻監控系統中,根據不同的用戶需要,做了好多種視頻監控內核,有ffmpeg內核的,有vlc內核的,有mpv內核的,還有海康sdk內核的,為了做成通用的功能,不同內核很方便的切換,比如pro直接改一個DEFINE的變量名,所以需要將各種內核的使用方法做成一樣的接口,這樣看起來就很整齊,所以後面特意提煉了一個通用的視頻控制項,該控制項沒有具體的視頻播放控制功能,需要根據不同的內核去調用具體的方法實現,後面還需要增加大華sdk或者其他第三方廠家的協議的時候,直接套用這個通用視頻控制項即可,以後增加新的監控內核,可以省下很多工作量,基本上只需要做內核解析就行,其餘通用接口和繪製圖像直接交給通用視頻控制項就行。

通用視頻控制項功能:

1. 可設置邊框大小

2. 可設置邊框顏色

3. 可設置兩路OSD標籤

4. 可設置是否繪製OSD標籤

5. 可設置標籤文本或圖片

6. 可設置OSD位置 左上角+左下角+右上角+右下角

7. 可設置OSD風格 文本+日期+時間+日期時間+圖片

8. 自定義半透明懸浮窗體,一排按鈕

9. 懸浮按鈕可自定義設置,包括背景顏色+按下顏色

10. 發送信號通知單擊了哪個懸浮按鈕

11. 能夠識別拖進來的文件,通知url

12. 提供open close pause等接口

二、功能特點

1. 支持多畫面切換,全屏切換等,包括1+4+6+8+9+13+16+25+36+64畫面切換。

2. 支持alt+enter全屏,esc退出全屏。

3. 自定義信息框+錯誤框+詢問框+右下角提示框(包含多種格式)。

4. 17套皮膚樣式隨意更換,所有樣式全部統一,包括菜單等。

5. 雲臺儀錶盤滑鼠移上去高亮,八個方位精準識別。

6. 底部畫面工具欄(畫面分割切換+截圖聲音等設置)移上去高亮。

7. 可在配置文件更改左上角logo+中文軟體名稱+英文軟體名稱。

8. 封裝了百度地圖,視圖切換,運動軌跡,設備點位,滑鼠按下獲取經緯度等。

9. 支持圖片地圖,設備按鈕可以在圖片地圖上自由拖動自動保存位置信息。

10. 在百度地圖和圖片地圖上,雙擊視頻可以預覽攝像頭實時視頻。

11. 堆棧窗體,每個窗體都是個單獨的qwidget,方便編寫自己的代碼。

12. 頂部滑鼠右鍵菜單,可動態控制時間CPU+左上角面板+左下角面板+右上角面板+右下角面板的顯示和隱藏,支持恢復默認布局。

13. 工具欄可以放置多個小圖標和關閉圖標。

14. 左側右側可拖動拉伸,並自動記憶寬高位置,重啟後恢復。

15. 雙擊攝像機節點自動播放視頻,雙擊節點自動依次添加視頻,會自動跳到下一個,雙擊父節點自動添加該節點下的所有視頻。

16. 攝像機節點拖曳到對應窗體播放視頻,同時支持拖曳本地文件直接播放。

17. 視頻畫面窗體支持拖曳交換,瞬間響應。

18. 雙擊節點+拖曳節點+拖曳窗體交換位置,均自動更新url.txt。

19. 支持從url.txt中加載通道視頻播放,自動記憶最後通道對應的視頻,軟體啟動後自動打開播放。

20. 右下角音量條控制項,失去焦點自動隱藏,音量條帶靜音圖標。

21. 集成百度在線地圖和離線地圖,可以添加設備對應位置,自動生成地圖,支持縮放和添加覆蓋物等。

22. 視頻拖動到通道窗體外自動刪除視頻。

23. 滑鼠右鍵可刪除當前+所有視頻,截圖當前+所有視頻。

24. 錄像機管理、攝像機管理,可添加刪除修改導入導出列印信息,立即應用新的設備信息生成樹狀列表,不需重啟。

25. 在pro文件中可以自由開啟是否加載地圖。

26. 視頻播放可選2種內核自由切換,vlc+ffmpeg,均可在pro中設置。

27. 可設置1+4+9+16畫面輪詢,可設置輪詢間隔以及輪詢碼流類型等,直接在主界面底部工具欄右側單擊啟動輪詢按鈕即可,再次單擊停止輪詢。

28. 默認超過10秒鐘未操作自動隱藏滑鼠指針。

29. 支持onvif搜素設備,支持任意onvif攝像機,包括但不限於海康大華宇視天地偉業華為等。

30. 支持onvif雲臺控制,可上下左右移動雲臺攝像機,包括復位和焦距調整等。

31. 同時支持sqlite、mysql、postsql等資料庫。

32. 可保存視頻,可選定時存儲或者單文件存儲,可選存儲間隔時間。

33. 可設置視頻流通信方式tcp+udp,可設置視頻解碼是速度優先、質量優先、均衡等。

34. 可設置硬解碼類型,支持qsv、dxva2、d3d11va等。

35. 默認採用opengl繪製視頻,超低的CPU資源佔用,支持yuyv和nv12兩種格式繪製,很牛逼。

36. 高度可定製化,用戶可以很方便的在此基礎上衍生自己的功能,支持linux和mac系統。

三、效果圖



四、相關站點

1. 國內站點:[https://gitee.com/feiyangqingyun/QWidgetDemo](https://gitee.com/feiyangqingyun/QWidgetDemo)

2. 國際站點:[https://github.com/feiyangqingyun/QWidgetDemo](https://github.com/feiyangqingyun/QWidgetDemo)

3. 個人主頁:[https://blog.csdn.net/feiyangqingyun](https://blog.csdn.net/feiyangqingyun)

4. 知乎主頁:[https://www.zhihu.com/people/feiyangqingyun/](https://www.zhihu.com/people/feiyangqingyun/)

5. 體驗地址:[https://blog.csdn.net/feiyangqingyun/article/details/97565652](https://blog.csdn.net/feiyangqingyun/article/details/97565652)

五、核心代碼

void VideoWidget::paintEvent(QPaintEvent *){ //如果不需要繪製 if (!drawImage) { return; } //qDebug() << TIMEMS << &34; << objectName(); QPainter painter(this); painter.setRenderHints(QPainter::Antialiasing); //繪製邊框 drawBorder(&painter); if (!image.isNull()) { //繪製背景圖片 drawImg(&painter, image); //繪製標籤 drawOSD(&painter, osd1Visible, osd1FontSize, osd1Text, osd1Color, osd1Image, osd1Format, osd1Position); drawOSD(&painter, osd2Visible, osd2FontSize, osd2Text, osd2Color, osd2Image, osd2Format, osd2Position); } else { //繪製背景 drawBg(&painter); }}void VideoWidget::drawBorder(QPainter *painter){ if (borderWidth == 0) { return; } painter->save(); QPen pen; pen.setWidth(borderWidth); pen.setColor(hasFocus() ? focusColor : borderColor); painter->setPen(pen); painter->drawRect(rect()); painter->restore();}void VideoWidget::drawBg(QPainter *painter){ painter->save(); //背景圖片為空則繪製文字,否則繪製背景圖片 if (bgImage.isNull()) { painter->setFont(this->font()); painter->setPen(palette().foreground().color()); painter->drawText(rect(), Qt::AlignCenter, bgText); } else { //居中繪製 int pixX = rect().center().x() - bgImage.width() / 2; int pixY = rect().center().y() - bgImage.height() / 2; QPoint point(pixX, pixY); painter->drawImage(point, bgImage); } painter->restore();}void VideoWidget::drawImg(QPainter *painter, QImage img){ painter->save(); int offset = borderWidth * 1 + 0; if (fillImage) { QRect rect(offset / 2, offset / 2, width() - offset, height() - offset); painter->drawImage(rect, img); } else { //按照比例自動居中繪製 img = img.scaled(width() - offset, height() - offset, Qt::KeepAspectRatio); int pixX = rect().center().x() - img.width() / 2; int pixY = rect().center().y() - img.height() / 2; QPoint point(pixX, pixY); painter->drawImage(point, img); } painter->restore();}void VideoWidget::drawOSD(QPainter *painter, bool osdVisible, int osdFontSize, const QString &osdText, const QColor &osdColor, const QImage &osdImage, const VideoWidget::OSDFormat &osdFormat, const VideoWidget::OSDPosition &osdPosition){ if (!osdVisible) { return; } painter->save(); //標籤位置儘量偏移多一點避免遮擋 QRect osdRect(rect().x() + (borderWidth * 2), rect().y() + (borderWidth * 2), width() - (borderWidth * 5), height() - (borderWidth * 5)); int flag = Qt::AlignLeft | Qt::AlignTop; QPoint point = QPoint(osdRect.x(), osdRect.y()); if (osdPosition == OSDPosition_Left_Top) { flag = Qt::AlignLeft | Qt::AlignTop; point = QPoint(osdRect.x(), osdRect.y()); } else if (osdPosition == OSDPosition_Left_Bottom) { flag = Qt::AlignLeft | Qt::AlignBottom; point = QPoint(osdRect.x(), osdRect.height() - osdImage.height()); } else if (osdPosition == OSDPosition_Right_Top) { flag = Qt::AlignRight | Qt::AlignTop; point = QPoint(osdRect.width() - osdImage.width(), osdRect.y()); } else if (osdPosition == OSDPosition_Right_Bottom) { flag = Qt::AlignRight | Qt::AlignBottom; point = QPoint(osdRect.width() - osdImage.width(), osdRect.height() - osdImage.height()); } if (osdFormat == OSDFormat_Image) { painter->drawImage(point, osdImage); } else { QDateTime now = QDateTime::currentDateTime(); QString text = osdText; if (osdFormat == OSDFormat_Date) { text = now.toString(&34;); } else if (osdFormat == OSDFormat_Time) { text = now.toString(&34;); } else if (osdFormat == OSDFormat_DateTime) { text = now.toString(&34;); } //設置顏色及字號 QFont font; font.setPixelSize(osdFontSize); painter->setPen(osdColor); painter->setFont(font); painter->drawText(osdRect, flag, text); } painter->restore();}

相關焦點

  • Qt音視頻開發16-mpv通用接口
    一、前言前面幾篇文章,依次講了解碼播放、錄像存儲、讀取和控制、事件訂閱等,其實這些功能的實現都離不開封裝的通用的接口,最開始本人去調用一些設置的時候,發現多參數的不好實現,原來需要用mpv_node處理,而Qt中如何轉成mpv_node需要特殊的處理才行,後來在開源主頁看到了官方提供的demo例子,直接用qt封裝好了多個接口
  • Qt音視頻開發24-ffmpeg音視頻同步
    一、前言用ffmpeg來做音視頻同步,個人認為這個是ffmpeg基礎處理中最難的一個,無數人就卡在這裡,怎麼也不準,本人也是嘗試過網上各種demo,基本上都是渣渣,要麼僅僅支持極其少量的視頻文件比如收到的數據包是一幀視頻一幀音頻的
  • Qt音視頻開發21-通用硬解碼
    在百度地圖和圖片地圖上,雙擊視頻可以預覽攝像頭實時視頻。11. 堆棧窗體,每個窗體都是個單獨的qwidget,方便編寫自己的代碼。12. 頂部滑鼠右鍵菜單,可動態控制時間CPU+左上角面板+左下角面板+右上角面板+右下角面板的顯示和隱藏,支持恢復默認布局。13. 工具欄可以放置多個小圖標和關閉圖標。14.
  • Qt音視頻開發1-vlc解碼播放
    一、前言最開始接觸視頻監控這塊的時候,用的就是vlc作為解碼的內核,主要是因為vlc使用簡單方便,直接傳入一個句柄即可,簡單幾行代碼就可以實現一個視頻流播放,很適合初學者使用,也推薦初學者用qt+vlc來做播放器,提供的接口還是非常友好的,而且門類特別多,想要獲取媒體文件的各種信息比如寬高,設置寬高比等,直接調用接口函數傳入參數就能設置
  • Qt音視頻開發22-通用GPU顯示
    一、前言採用GPU來繪製實時視頻一直以來都是個難點,如果是安防行業的做視頻監控開發這塊的人員,這個坎必須邁過去,本人一直從事的是安防行業的電子圍欄這個相當小眾的細分市場的開發,視頻監控這塊僅僅是周邊技術玩一玩探討一下,關於GPU繪製這塊著實走了不少的彎路。
  • Qt音視頻開發6-ffmpeg解碼處理
    一、前言採用ffmpeg解碼,是所有視頻監控開發人員必備的技能,繞不過去的一個玩意,甚至可以說是所有音視頻開發人員的必備技能。FFmpeg是一套可以用來記錄、轉換數字音頻、視頻,並能將其轉化為流的開源電腦程式。
  • Qt音視頻開發33-ffmpeg安卓版
    ## 一、前言一直都想搞個安卓版本的視頻監控程序,很早以前弄過一個,採用的是早期的ffmpeg2的lib文件,對於現在眾多的網絡流媒體格式,支持有限,而且新的Qt編寫安卓程序,結構上也變動了,新的安卓系統權限要求也和以前處理不一樣了,現在需要動態授權,以前是直接配置文件寫好需要哪些權限就行,所以近期特意全部重寫了一遍安卓版本的視頻監控程序
  • Qt音視頻開發20-海康sdk本地播放
    一、前言海康sdk中包含了MP4解碼播放庫,對應的API函數都是PlayM4開頭的,顧名思義播放MP4,海康的視頻默認可以保存成MP4文件,可以用通用的播放器來播放,這就是為啥前面好多篇文章講到的各種內核錄像存儲都改成MP4來存儲,vlc、mpv、
  • Qt音視頻開發13-mpv錄像存儲
    嵌入式linux,記得vlc想要在嵌入式linux上交叉編譯成功的話,難於上青天,各種插件的依賴實在是太多了,直到你放棄為止,在X86的linux系統還是比較方便一些的,而在這塊,mpv簡直是完爆vlc啊,直接命令行都可以在嵌入式linux上安裝呢,內置的ffmpeg超強解碼器,使得你可以直接命令行調用mpv來播放音視頻,這在一些嵌入式linux
  • Qt音視頻開發26-ffmpeg播放器
    一、前言用ffmpeg來實現自己的播放器,這是一直以來的一個目標,之前的難點卡在音視頻同步以及如何播放聲音這兩點(儘管之前已經進行過不少的嘗試和探索,但是問題還是挺多,比如音視頻同步不完美,有些文件正常而有些文件不準,聲音播放採用的
  • Qt音視頻開發25-ffmpeg音量設置
    一、前言音視頻的播放、關閉、暫停、繼續這幾個基本功能,絕大部分人都是信手拈來的搞定,關於音量調節還是稍微饒了下彎彎,最開始打算採用各個系統的api來處理,坐下來發現不大好,系統的支持不完美,比如有些api限定了win7,而xp確沒有,而且這玩意控制的是全局的音量,不好,大部分時候需要控制的是當前播放的媒體的音量,估計vlc
  • Qt音視頻開發5-vlc事件訂閱
    事件訂閱可以拿到文件長度、播放進度、播放狀態改變等信息,vlc的事件訂閱機制封裝的比較友好,只需要先創建一個事件管理器,然後逐個訂閱自己感興趣的需要的事件,不感興趣的可以不要訂閱,只有訂閱了的事件才能在事件回調中拿到,所以如果在事件回調中發現一些事件沒有拿到,首先要檢查下到底訂閱了沒有,所有事件的枚舉在libvlc_events.h頭文件中可以查閱到,都用的是通俗易懂的全英文單詞描述,有過基本英語能力的開發人員都能看懂
  • Qt音視頻開發28-Onvif信息獲取
    ## 一、前言嚴格意義上來說,Onvif處理這塊算不上音視頻開發的內容,為何重新整理放在音視頻開發這個類別,主要是為了方便統一管理,而且在視頻監控處理這塊,通過onvif來拿到音視頻流這是必經的階段,也算是搭邊的東西。
  • Qt音視頻開發10-ffmpeg控制播放
    一、前言很多人在用ffmpeg做視頻流解碼的時候,都會遇到一個問題,如何暫停,如果打開的是本地視頻文件,暫停你只需要停止解碼即可,但是視頻流你會發現根本沒用,一旦你停止了解碼,下次重新解碼的時候,居然還是以前的圖片,他是從你最後暫停開始的地方重新解碼的,這就懵逼了,為啥呢?
  • Qt音視頻開發12-mpv解碼播放
    你只需要封裝幾個通用的處理接口(讀取屬性mpv_get_property、設置屬性mpv_set_property、執行命令mpv_command_node、設置參數mpv_set_option),就涵蓋了絕大多數的功能,你說簡單易用不,要的就是這種效果呢!!!
  • Qt音視頻開發18-海康sdk回調
    一、前言海康sdk顯示實時視頻流除了支持句柄方式以外,也支持回調的方式拿到每一張圖片自己繪製處理,當然回調除了拿到視頻數據,其實音頻數據也一塊拿到了,自行調用音頻設備播放就行,關於海康sdk回調這塊,還著實折騰了一陣子才搞定,可能最開始沒有參照提供的demo以及沒有徹底的搜索吧,只是單單看sdk的文檔折騰來折騰去的,搞了一星期居然沒搞定
  • 愛奇藝知識的音視頻通用播放架構實踐
    愛奇藝知識技術團隊較早就開始針對兼顧音視頻播放架構進行思考、通過實踐開發出一套音視頻播放的通用架構,支持更豐富的音視頻場景體驗,有效解決了行業內面臨的技術挑戰,本文將分享愛奇藝知識音視頻通用播放架構的實踐。
  • Qt音視頻開發36-USB攝像頭解碼qcamera方案
    ## 一、前言除了監控專用的攝像頭以外,有一些應用場景用的還是USB攝像頭,甚至還有一些單片機或者開發板上用的CMOS攝像頭,而Qt在嵌入式領域應用相當廣,所以用Qt來讀取加載顯示USB攝像頭和CMOS攝像頭,也是非常多Qter做過的事情,qt本身就封裝了qcamera類,專用於本地攝像頭的讀取顯示,這個類主要是在windows
  • Qt音視頻開發2-vlc回調處理
    一、前言用句柄來顯示視頻,方便是很方便,但是有個缺點就是不能拿到實時視頻的每張圖片的數據,這個就比較討厭,大部分的監控行業的應用,除了截圖以外,很可能需要拿到圖片自己做一些處理的,而且拿到圖片自己繪製的話,這個靈活性就大大增強了,比如繪製各種OSD標籤,想怎麼繪製就怎麼繪製,想在那裡繪製就在那裡繪製,句柄的話還得搞個標籤沒有父類自動跟隨移動非常討厭
  • Qt音視頻開發7-ffmpeg音頻播放
    ffmpeg解碼出來了音頻,只是做了存儲部分,比如存儲成aac文件,播放的話早期用的是sdl來播放音頻,自從Qt5以後提供了QAudioOutput來播放輸入的音頻數據,就更加方便了,可以直接將解碼好的音頻數據寫入就能播放了,這些就少了個學習sdl的成本,而且和Qt就更加融合,不需要額外的第三方庫,解碼好的視頻