分布式I/O日志收集系统的设计与实现

doi:10.3778/j.issn.1002-8331.2010.36.024

计算机工程与应用 ›› 2010, Vol. 46 ›› Issue (36): 88-90.DOI: 10.3778/j.issn.1002-8331.2010.36.024

分布式I/O日志收集系统的设计与实现

詹玲¹，马骏²，陈伯江²，陈维梁³，吕睿²

1.湖北第二师范学院计算机学院，武汉 430205
2.中科海量存储技术（北京）有限公司，北京 100083
3.齐鲁证券有限公司，山东淄博 255034

收稿日期:2010-10-15 修回日期:2010-11-16 出版日期:2010-12-21 发布日期:2010-12-21
通讯作者: 詹玲

Design and implementation of I/O trace collection system in distributed environment

ZHAN Ling¹，MA Jun²，CHEN Bo-jiang²，CHEN Wei-liang³，LV Rui²

1.Department of Computer Science，Hubei University of Education，Wuhan 430074，China
2.Sino-Tech Mass Storage Technology Ltd.（Beijing），Beijing 100083，China
3.Qilu Securities Co.，Ltd.，Zibo，Shandong 255034，China

Received:2010-10-15 Revised:2010-11-16 Online:2010-12-21 Published:2010-12-21
Contact: ZHAN Ling

摘要/Abstract

摘要： 随着存储系统的快速发展，以及实际应用中对存储系统的要求日益苛刻，为了研究存储系统I/O子系统的运行形态，设计并实现了一种分布式I/O日志收集系统，该系统能够通过总控制台同时控制分布式系统的多个节点并行收集分布式系统的I/O日志，为分析和回放分布式系统的I/O日志提供有效的数据，且详细描述了系统的设计与实现。

关键词: 日志收集, 分布式, 存储系统

Abstract: With the rapid development of information technology application，I/O system is becoming more and more complicated，especially in the distributed computing environment.In order to explore the I/O behavior in the distributed computing environment，this paper designs and implements a novel tracing tool called distributed I/O trace system，which can simultaneously control each node’s I/O trace collecting behavior in a parallel distributed system.Distributed I/O trace system can also receive the I/O traces collected from each node，then save and manage the I/O traces.This paper describes the design considerations and the implementation details.

Key words: trace collection, distributed, storage system

中图分类号:

TP303

詹玲¹，马骏²，陈伯江²，陈维梁³，吕睿². 分布式I/O日志收集系统的设计与实现[J]. 计算机工程与应用, 2010, 46(36): 88-90.

ZHAN Ling¹，MA Jun²，CHEN Bo-jiang²，CHEN Wei-liang³，LV Rui². Design and implementation of I/O trace collection system in distributed environment[J]. Computer Engineering and Applications, 2010, 46(36): 88-90.

[1]	江魁，丘远东，郑浩城. 基于信息熵与LSTM的ICMPv6 DDoS攻击检测方法[J]. 计算机工程与应用, 2021, 57(21): 148-154.
[2]	王海瑞，鲜于建川. 改进麻雀搜索算法在分布式电源配置中的应用[J]. 计算机工程与应用, 2021, 57(20): 245-252.
[3]	田阳，陈智罡，宋新霞，李天明. 区块链在供应链管理中的应用综述[J]. 计算机工程与应用, 2021, 57(19): 70-83.
[4]	张俊，廖雪花，余旭玲，雷蒙. 关系型数据库内存化存储模型研究[J]. 计算机工程与应用, 2021, 57(19): 123-128.
[5]	王文涛，李树梅，汤婕，吕伟龙. 结合概率图模型与DNN的DDoS攻击检测方法[J]. 计算机工程与应用, 2021, 57(13): 108-115.
[6]	魏占辰，刘晓宇，黄秋兰，孙功星. Spark迭代密集型应用的优化方法研究[J]. 计算机工程与应用, 2020, 56(23): 68-73.
[7]	刘祖均，何明，马子玉，顾凌枫. 基于分布式一致性的无人机编队控制方法[J]. 计算机工程与应用, 2020, 56(23): 146-152.
[8]	何锋，曾文，王秉钧. 并行实时测控数据存储系统设计与实现[J]. 计算机工程与应用, 2020, 56(23): 253-258.
[9]	胡学林，艾山·吾买尔. 基于分布式表示技术的推荐算法综述[J]. 计算机工程与应用, 2020, 56(22): 13-24.
[10]	程振京，程耀东，陈刚，汪璐，李海波，胡庆宝. 基于随机森林的高能物理数据放置策略[J]. 计算机工程与应用, 2020, 56(21): 60-64.
[11]	周国亮，李刚. 区块链背景下虚拟电厂分布式调度策略研究[J]. 计算机工程与应用, 2020, 56(15): 268-273.
[12]	胡阳，胡学钢，李培培. 基于Spark的快速短文本数据流分类方法[J]. 计算机工程与应用, 2020, 56(14): 138-147.
[13]	魏占辰，黄秋兰，孙功星，刘晓宇，王轶. Alluxio数据随机访问方法的研究[J]. 计算机工程与应用, 2020, 56(13): 77-83.
[14]	滕增德，廖祝华. 面向命名数据网络的数据查询区分服务机制[J]. 计算机工程与应用, 2019, 55(9): 17-25.
[15]	陈熙宁1，2，马蔚吟3，李力4. 基于Spark的指纹定位数据处理方法[J]. 计算机工程与应用, 2019, 55(4): 79-83.

分布式I/O日志收集系统的设计与实现

Design and implementation of I/O trace collection system in distributed environment

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics