基于GPU的視頻大數(shù)據處理方法研究.pdf

1、非結構化的視頻大數(shù)據具有體量大、信息量大、分析難、計算耗時等特點。隨著大數(shù)據處理需求越來越大，先后出現(xiàn)了以處理結構化數(shù)據為中心的大數(shù)據處理框架Hadoop和Spark，大數(shù)據框架的出現(xiàn)為視頻大數(shù)據的存儲和分析提供了新的思路。與此同時，GPU并行計算技術在視頻和圖像處理領域的發(fā)展也取得了較大突破，同樣可以為視頻大數(shù)據的處理過程提供強有力的支撐。本文將探索GPU并行計算與視頻大數(shù)據處理技術的有效結合，以解決視頻大數(shù)據的處理難題，最后以海冰視

2、頻分析為例驗證本研究內容。
　　在視頻預處理階段，采用NVCUVID視頻解碼API實現(xiàn)泛格式視頻解碼庫，有效降低高CPU占用；采用NVENC視頻編碼API實現(xiàn)泛格式視頻編碼庫，加快編碼速度；針對海冰視頻圖像幀的特點，提出結合混合高斯背景建模算法和幀差法實現(xiàn)的海冰視頻摘要幀提取算法，并采用GPU并行計算進行加速。分別通過三組實驗驗證上述實現(xiàn)和并行算法。
　　在視頻圖像幀內容分析階段，針對海冰視頻內容分析的特點，提出了一種連通區(qū)

3、域快速標定與提取算法。將該算法應用于具有高密集度的海冰圖像參數(shù)分析，可以有效解決現(xiàn)存連通區(qū)域搜索算法無法快速處理大尺寸海冰圖像分析的問題。針對基于GPU并行編程技術實現(xiàn)的視頻預處理庫，通過Spark的pipe動作（Action）設計了Spark的調用接口。針對采用C++實現(xiàn)的海冰圖像幀外部分析庫，通過JNI技術設計了相應的Spark調用接口。
　　最終設計并實現(xiàn)了基于GPU的海冰視頻大數(shù)據處理平臺。以HDFS上的海冰視頻為輸入數(shù)據