国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于Cache的海量圖片存取優(yōu)化方案
DOI:
CSTR:
作者:
作者單位:

(四川民族學(xué)院 計算機科學(xué)系,四川 康定 626001 )

作者簡(jiǎn)介:

陳 渝(1974-),男,四川儀隴人,碩士,副教授,主要從事計算機應用、人機交互技術(shù)方向的研究。[FQ)]

通訊作者:

中圖分類(lèi)號:

TP391

基金項目:

四川省教育廳科研項目(13ZA0135)。


High Concurrent Access Optimization in HDFS Based on Cache for Mass Images
Author:
Affiliation:

(Department of Computer Science,Sichuan University for Nationalites, Kangding 626001, China)

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    針對Hadoop分布式文件系統(Hadoop distributed file system,HDFS)存儲海量圖片效率低下的問(wèn)題,在分析HDFS的基本框架以及其固有的文件讀寫(xiě)流程基礎上,提出了基于Cache的海量圖片存儲優(yōu)化方案(HDFS based on Cache,CHDFS);該方案引入了Cache、預讀、文件合并等機制,來(lái)提高圖片讀寫(xiě)的性能,彌補了HDFS存儲海量圖片時(shí)的缺陷;采用圖片合并的方式減少Namenode中元數據的個(gè)數,同時(shí)提高Datanode存儲空間的利用率;由于Cache、預讀以及圖片合并等操作對用戶(hù)都是透明的,所以,該方案并沒(méi)有增加用戶(hù)使用HDFS的復雜性;實(shí)驗結果表明,CHDFS方法可以有效地提高圖片的存取效率。

    Abstract:

    To solve the problem of the low efficiency of HDFS (Hadoop Distributed File System) to store mass images, this paper studied the HDFS architecture and the flow of reading and writing files into HDFS, and then proposed an access optimization solution for mass pictures which is based on Cache. It is called CHDFS (HDFS Based on Cache).CHDFS adopts the following ideas to improve the performance, such as establishing appropriate cache ,reading ahead pictures, merging more than one images into a big file and so on. File merge can decrease the number of metadata in Namenode and improve the capacity factor of storage space in Datanode. To the client, this solution does not complex the operations to use the HDFS, due to the transparency of cache, read ahead and pictures merge. The experimental data indicates that CHDFS can increase the performance of storing and accessing mass pictures in HDFS without affecting the normal running of HDFS.

    參考文獻
    相似文獻
    引證文獻
引用本文

陳渝.基于Cache的海量圖片存取優(yōu)化方案計算機測量與控制[J].,2014,22(8):2669-2672,2676.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2014-04-15
  • 最后修改日期:2014-05-04
  • 錄用日期:
  • 在線(xiàn)發(fā)布日期: 2014-12-16
  • 出版日期:
文章二維碼
眉山市| 南充市| 陕西省| 邹城市| 定州市| 盐津县| 常熟市| 皋兰县| 军事| 安徽省| 锦屏县| 定远县| 确山县| 泽州县| 安化县| 云南省| 绥德县| 龙川县| 桂平市| 靖远县| 湘潭市| 方山县| 宁乡县| 托克托县| 缙云县| 故城县| 尤溪县| 柳林县| 扬中市| 琼中| 介休市| 神农架林区| 石狮市| 温宿县| 雷州市| 正宁县| 宜昌市| 略阳县| 武城县| 六安市| 韩城市|