SHF: Small: ASF: An Adaptive Scaling Framework for High Scalability of XOR-Based RAID Systems
SHF:小型:ASF:基于 XOR 的 RAID 系统的高可扩展性的自适应扩展框架
基本信息
- 批准号:1702474
- 负责人:
- 金额:$ 16.24万
- 依托单位:
- 依托单位国家:美国
- 项目类别:Standard Grant
- 财政年份:2016
- 资助国家:美国
- 起止时间:2016-08-15 至 2019-01-31
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
Explosive growth in data volume, heterogeneity, and complexity imposes unprecedented challenges in data analysis and organization in data centers. RAID particularly XOR-based RAID plays an important role to provide both reliability and high performance storage services for these data centers. However, they suffer from problems on the scalability issue due to multi-folded factors, including: heterogeneous RAID layouts and various erasure codes, high overhead of existing scaling process to significantly downgrade the storage performance, and lack of bidirectional scaling support. The objective of this project is to address the scalability challenge for storage systems in large data centers. This project designs novel techniques to exploit XOR-based parity codes to achieve efficient scaling, develops a series of scalable XOR-based erasure codes to bridge the relations among heterogeneous RAID forms for interoperability, and integrates various erasure codes in a framework to provide a unified user interface for RAID scaling. The research will facilitate the storage systems to effectively tackle the scalability challenge in large data centers. It cohesively investigates how to utilize and integrate proper RAID scaling technologies to improve the scalability of storage systems. This project will yield fundamental contributions to research on efficient big data management in high-performance data centers, and greatly contribute to enabling high-performance computing systems to stay on track of their historic scaling, and hence benefit numerous real-life data-intensive applications such as biology, chemistry, earth science, health care, and so on.
数据量、异构性和复杂性的爆炸性增长给数据中心的数据分析和组织带来了前所未有的挑战。 RAID(尤其是基于 XOR 的 RAID)在为这些数据中心提供可靠性和高性能存储服务方面发挥着重要作用。然而,由于多种因素,它们在可扩展性问题上遇到了问题,包括:异构 RAID 布局和各种纠删码、现有扩展过程的高开销导致存储性能显着降低,以及缺乏双向扩展支持。该项目的目标是解决大型数据中心存储系统的可扩展性挑战。该项目设计了新颖的技术来利用基于 XOR 的奇偶校验码来实现高效扩展,开发了一系列可扩展的基于 XOR 的纠删码来桥接异构 RAID 形式之间的关系以实现互操作性,并将各种纠删码集成在一个框架中以提供统一的用于 RAID 扩展的用户界面。该研究将有助于存储系统有效应对大型数据中心的可扩展性挑战。它集中研究了如何利用和集成适当的 RAID 扩展技术来提高存储系统的可扩展性。该项目将为高性能数据中心高效大数据管理的研究做出基础性贡献,并为高性能计算系统保持历史性扩展做出巨大贡献,从而使众多现实生活中的数据密集型应用受益例如生物学、化学、地球科学、医疗保健等。
项目成果
期刊论文数量(10)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Chameleon: An Adaptive Wear Balancer for Flash Clusters
Chameleon:闪存集群的自适应磨损平衡器
- DOI:
- 发表时间:2018-05
- 期刊:
- 影响因子:0
- 作者:Zhao, N;Anwar, A;Cheng, Y;Salman, M;Li, D;Wan, J;Xie, C;He, X;Wang, F;Butt, A
- 通讯作者:Butt, A
RAFI: Risk-Aware Failure Identification to Improve the RAS in Erasure-coded Data Centers
RAFI:风险意识故障识别以改进纠删码数据中心的 RAS
- DOI:
- 发表时间:2018-07
- 期刊:
- 影响因子:0
- 作者:Fang, J;Wan, S;He, X
- 通讯作者:He, X
SELF: A High Performance and Bandwidth Efficient Approach to Exploiting Die-Stacked DRAM as Part of Memory
SELF:一种利用裸片堆叠 DRAM 作为内存一部分的高性能和带宽高效方法
- DOI:10.1109/mascots.2017.23
- 发表时间:2017-09
- 期刊:
- 影响因子:0
- 作者:Guo, Yuhua;Liu, Qing;Xiao, Weijun;Huang, Ping;Podhorszki, Norbert;Klasky, Scott;He, Xubin
- 通讯作者:He, Xubin
DREAM: Data Representation Aware of Damage to Extend the Lifetime of MLC NAND Flash Memory
DREAM:感知损坏的数据表示以延长 MLC NAND 闪存的使用寿命
- DOI:
- 发表时间:2018-07
- 期刊:
- 影响因子:0
- 作者:Ye, T;Wan, S;He, X;Xiao, W;Xie, C
- 通讯作者:Xie, C
A Set-aware Key-Value Store on Shingled Magnetic Recording Drives with Dynamic Band
具有动态频带的叠瓦式磁记录驱动器上的设置感知键值存储
- DOI:
- 发表时间:2018-05
- 期刊:
- 影响因子:0
- 作者:Yao, T;Tan, Z;Wan, J;Huang, P;Zhang, Y;Xie, C;He, X
- 通讯作者:He, X
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
Xubin He其他文献
Exploiting Minipage-Level Mapping to Improve Write Efficiency of NAND Flash
利用小页级映射提高 NAND 闪存写入效率
- DOI:
10.1109/nas.2018.8515728 - 发表时间:
2018-10-01 - 期刊:
- 影响因子:0
- 作者:
Hao Lv;You Zhou;Fei Wu;Weijun Xiao;Xubin He;Zhonghai Lu;C. Xie - 通讯作者:
C. Xie
BPAC: An adaptive write buffer management scheme for flash-based Solid State Drives
BPAC:基于闪存的固态驱动器的自适应写入缓冲区管理方案
- DOI:
10.1109/msst.2010.5496998 - 发表时间:
2010-05-03 - 期刊:
- 影响因子:0
- 作者:
Guanying Wu;Benjamin Eckart;Xubin He - 通讯作者:
Xubin He
LAMS: A latency-aware memory scheduling policy for modern DRAM systems
LAMS:现代 DRAM 系统的延迟感知内存调度策略
- DOI:
10.1109/pccc.2016.7820660 - 发表时间:
2016-12-01 - 期刊:
- 影响因子:0
- 作者:
Wenjie Liu;Ping Huang;Tang Kun;Tao Lu;Ke Zhou;Chun;Xubin He - 通讯作者:
Xubin He
A Comprehensive Analysis of XOR-Based Erasure Codes Tolerating 3 or More Concurrent Failures
容忍 3 个或更多并发故障的基于 XOR 的纠删码的综合分析
- DOI:
10.1109/ipdpsw.2013.155 - 发表时间:
2013-05-20 - 期刊:
- 影响因子:0
- 作者:
P. Subedi;Xubin He - 通讯作者:
Xubin He
Prediction of adsorption performance of ZIF-67 for malachite green based on artificial neural network using L-BFGS algorithm.
使用L-BFGS算法基于人工神经网络预测ZIF-67对孔雀石绿的吸附性能。
- DOI:
10.1016/j.jhazmat.2024.134629 - 发表时间:
2024-05-15 - 期刊:
- 影响因子:13.6
- 作者:
Xiaoqing Wang;Shangkun Liu;Shaolei Chen;Xubin He;Wenjing Duan;Siyuan Wang;Junzi Zhao;Liangquan Zhang;Qing Chen;Chunhua Xiong - 通讯作者:
Chunhua Xiong
Xubin He的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('Xubin He', 18)}}的其他基金
Collaborative Research: Elements: ProDM: Developing A Unified Progressive Data Management Library for Exascale Computational Science
协作研究:要素:ProDM:为百亿亿次计算科学开发统一的渐进式数据管理库
- 批准号:
2311758 - 财政年份:2023
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
Collaborative Research: SHF: Small: Rethinking Performance Variation for Emerging Applications - An Application-centric and Cross-layer Approach
协作研究:SHF:小型:重新思考新兴应用程序的性能变化 - 以应用程序为中心的跨层方法
- 批准号:
2134203 - 财政年份:2022
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
SHF:Small: Collaborative Research: Understanding, Modeling, and System Support for HPC Data Reduction
SHF:Small:协作研究:HPC 数据缩减的理解、建模和系统支持
- 批准号:
1813081 - 财政年份:2018
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
SHF:Small: Collaborative Research: Tailoring Memory Systems for Data-Intensive HPC Applications
SHF:Small:协作研究:为数据密集型 HPC 应用定制内存系统
- 批准号:
1717660 - 财政年份:2017
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
CSR: Small: Cost Effective, High Performance Solutions Using Erasure Codes for Big Data Management in Large Data Centers
CSR:小型:在大型数据中心使用纠删码进行大数据管理的经济高效、高性能解决方案
- 批准号:
1700719 - 财政年份:2016
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
SHF: Small: ASF: An Adaptive Scaling Framework for High Scalability of XOR-Based RAID Systems
SHF:小型:ASF:基于 XOR 的 RAID 系统的高可扩展性的自适应扩展框架
- 批准号:
1320349 - 财政年份:2014
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
CSR: Small: Cost Effective, High Performance Solutions Using Erasure Codes for Big Data Management in Large Data Centers
CSR:小型:在大型数据中心使用纠删码进行大数据管理的经济高效、高性能解决方案
- 批准号:
1218960 - 财政年份:2012
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
RUI: Automatic Identification of I/O Bottleneck and Run-time Optimization for Cluster Virtualization
RUI:集群虚拟化I/O瓶颈自动识别与运行时优化
- 批准号:
1102624 - 财政年份:2010
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
Collaborative Research: Cross-Layer Exploration of Non-Volatile Solid-State Memories to Achieve Effective I/O Stack for High-Performance Computing Systems
协作研究:非易失性固态存储器的跨层探索,为高性能计算系统实现有效的 I/O 堆栈
- 批准号:
1102605 - 财政年份:2010
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
CSR---PDOS: A Benchmarking Framework for High-Availability Distributed Storage Systems
CSR---PDOS:高可用分布式存储系统的基准框架
- 批准号:
1102629 - 财政年份:2010
- 资助金额:
$ 16.24万 - 项目类别:
Continuing Grant
相似国自然基金
小分子代谢物Catechin与TRPV1相互作用激活外周感觉神经元介导尿毒症瘙痒的机制研究
- 批准号:82371229
- 批准年份:2023
- 资助金额:49 万元
- 项目类别:面上项目
DHEA抑制小胶质细胞Fis1乳酸化修饰减轻POCD的机制
- 批准号:82301369
- 批准年份:2023
- 资助金额:30 万元
- 项目类别:青年科学基金项目
异常激活的小胶质细胞通过上调CTSS抑制微血管特异性因子MFSD2A表达促进1型糖尿病视网膜病变的免疫学机制研究
- 批准号:82370827
- 批准年份:2023
- 资助金额:49 万元
- 项目类别:面上项目
SETDB1调控小胶质细胞功能及参与阿尔茨海默病发病机制的研究
- 批准号:82371419
- 批准年份:2023
- 资助金额:49 万元
- 项目类别:面上项目
PTBP1驱动H4K12la/BRD4/HIF1α复合物-PKM2正反馈环路促进非小细胞肺癌糖代谢重编程的机制研究及治疗方案探索
- 批准号:82303616
- 批准年份:2023
- 资助金额:30 万元
- 项目类别:青年科学基金项目
相似海外基金
SHF: Small: ASF: An Adaptive Scaling Framework for High Scalability of XOR-Based RAID Systems
SHF:小型:ASF:基于 XOR 的 RAID 系统的高可扩展性的自适应扩展框架
- 批准号:
1320349 - 财政年份:2014
- 资助金额:
$ 16.24万 - 项目类别:
Standard Grant
Formation of Heterochromatin and Cellular Senescence Driven by HIRA and ASF 1a
HIRA 和 ASF 1a 驱动的异染色质形成和细胞衰老
- 批准号:
7187379 - 财政年份:2001
- 资助金额:
$ 16.24万 - 项目类别: