四川大學(xué) 電子信息學(xué)院四川 成都 四川大學(xué) 電子信息學(xué)院 四川 成都,
TP
國家自然科學(xué)(61172181)自助
College of Electronics and Information Engineering,
目前,基于 Hadoop視頻處理的傳統方法都是通過(guò)MapReduce從本地文件系統讀取數據,利用幀字節流進(jìn)行MapReduce間數據傳輸,這會(huì )產(chǎn)生大量的系統 IO,造成系統資源浪費。針對此問(wèn)題,提出一種基于Hadoop平臺的視頻處理方法,實(shí)現Hadoop支持的視頻類(lèi)型擴展,設計了MapReduce 相關(guān)視頻數據處理接口,使 Hadoop 可以更快速處理視頻文件。通過(guò)在多臺計算機組成的集群實(shí)驗表明,該方法在運行時(shí)間上比傳統方法縮短10%,IO讀寫(xiě)量減少50%以上,提升了Hadoop視頻文件的處理效率。
AtSpresent,traditionalSmethodsSbasedSonSHadoopSvideoSprocessingSreadSdataSfromSlocalSfileSsystemSthroughStheSMapReduce.SUsingSbyte-stream,StheyStransferSdataSbetweenSMapReduce,SbutSthisSwillSproduceSaSlargeSamountSofSsystemSIOSandScauseSlossSofSresources.SConsideringStheSissue,SthisSpassageSproposesSaSvideoSprocessingSmethodSbasedSonSHadoopSplatform.STheSmethodSrealizesSvideoStypeSextensionsSSsupportedSbySHadoopSandSdesignsSvideoSdataSprocessingSinterfacesSaboutSMapReduce,SwhichSmakeSHadoopSprocessSvideoSfilesSmuchSfaster.SExperimentsSonScomputerSclusterSillustrateSthatScomparedSwithStraditionalSmethods,thisSmethod’sSrunningStimeSdecreasesSbyS10%SandStheamountSofSIOSreadSandSwriteSdeclineSmoreSthanS50%.SSoSitSimprovesStheSprocessingSefficiencySofSHadoopSvideoSfilesKeywords: Hadoop; Map-Reduce; parallel computing; video processing; IO write amount
康 浩,嚴 華.基于Hadoop的快速并行視頻處理方法計算機測量與控制[J].,2015,23(12):75.
您是本站第 4754718 訪(fǎng)問(wèn)者
通信地址:北京市海淀區阜成路14號航天12院
電話(huà)/傳真:01068372068 68767886 68370689 68371556 E-mail:ck@chinamca.com
版權所有:計算機測量與控制 ® 2025 版權所有
京公網(wǎng)安備 11010802026262號