大規模分散データの真に透過で効率的な共有を実現する分散共有配列システムの開発

开发分布式共享阵列系统,实现大规模分布式数据真正透明高效共享

基本信息

  • 批准号:
    16016226
  • 负责人:
  • 金额:
    $ 4.29万
  • 依托单位:
  • 依托单位国家:
    日本
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
  • 财政年份:
    2004
  • 资助国家:
    日本
  • 起止时间:
    2004 至 2005
  • 项目状态:
    已结题

项目摘要

本研究では、分散メモリ型システムを用いて巨大なメモリ領域を利用することができる、共有メモリプログラミングモデルにもとづく新しい並列プログラミング環境DSA(Distributed Shared Array)を開発する。DSAは、分散システムの上に、巨大なメモリ領域を仮想的に構築する。データの実体は、それぞれの計算機のメモリやディスクに分散して置かれるが、すべての計算機が、こうした物理的なデータの分散を意識しないで、グローバルなメモリ領域を共有できるようにすることにより、並列計算を行うプログラムの開発を容易にする。1台の計算機のメモリやディスクに格納しきれない巨大なデータも、この仮想的なメモリに置いて複数の計算機から共通に操作することができる。科学技術計算でよく用いられるベクトルや行列をこの巨大なメモリに格納して操作することにより、巨大なベクトルや行列を扱うプログラムも、分散システムの上でこれまでより簡単に開発できるようになり、しかも高速に実行できるようになる。データの実体は分散していても、利用者には、複数の計算機間で共有できるグローバルな配列が存在しているように見える。このような配列を「分散共有配列(DSA)」と呼んでいる。本研究では、DSAを、遺伝子クラスタリング、配列のマルチプルアラインメント、分子動力学計算など、生命情報科学の実際のアプリケーションに対して適用し、クラスタ型計算機上で性能評価を行い、分散するデータを効率的に操作・管理できること、MPIのプログラムと比較して、ノード数が増大してもスケーラブルな性能が得られることを確認し、本システムの有効性を実証した。その結果、数十台規模のクラスタシステムにおいて、高いスケーラビリティを実現した。
在本研究中,我们开发了一种基于共享内存编程模型的新并行编程环境DSA(分布式共享阵列),该模型可以使用分布式内存系统来利用巨大的内存区域。 DSA实际上是在分布式系统之上构建了一个巨大的内存区域。实际数据分布在每台计算机的内存和磁盘中,但是通过使所有计算机能够共享全局内存区域而无需了解数据的物理分布,有利于开发执行并行计算的程序。即使是无法存储在单台计算机的内存或磁盘中的大量数据也可以放置在该虚拟内存中,并由多台计算机共同操作。通过在这个巨大的内存中存储和操作科学和技术计算中经常使用的向量和矩阵,现在可以比以前更容易地在分布式系统上开发处理大型向量和矩阵的程序,而且执行速度更快。尽管实际数据是分布式的,但在用户看来,存在一个可以在多台计算机之间共享的全局数组。这种类型的数组称为“分布式共享数组 (DSA)”。在本研究中,我们将DSA应用到生物信息学的实际应用中,例如基因聚类、序列多重比对和分子动力学计算,评估其在集群计算机上的性能,并通过确认该系统的有效性来验证该系统的有效性。与MPI程序相比,它易于操作和管理,即使节点数量增加也可以获得可扩展的性能。结果,我们在一个拥有数十个系统的集群系统中实现了高可扩展性。

项目成果

期刊论文数量(14)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Identification of GPI-(like)-anchored Proteins by using SVM
使用 SVM 鉴定 GPI(样)锚定蛋白
A fast protein-protein docking algorithm using series expansion in terms of spherical basis functions
一种使用球基函数级数展开的快速蛋白质-蛋白质对接算法
Improvement of accuracy of free-energy landscapes of peptides calculated with generalized Born model by using numerical solutions of Poisson's equation
使用泊松方程的数值解提高广义玻恩模型计算的肽自由能图的准确性
  • DOI:
  • 发表时间:
    2004
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Sakai;H. et al.;Daiyasu H. et al.;Ichihara H. et al.;Standley D. et al.;Toh H.et al.;石塚 隆記
  • 通讯作者:
    石塚 隆記
Distributed shared arrays : Portable shared-memory programming interface for multiple computer systems
分布式共享数组:用于多个计算机系统的便携式共享内存编程接口
Crystal structure of the terminal cumene dioxygenase component of Pseudomonas fluorescens IP01
荧光假单胞菌 IP01 末端枯烯双加氧酶组分的晶体结构
  • DOI:
  • 发表时间:
    2005
  • 期刊:
  • 影响因子:
    0
  • 作者:
    曹 巍;角越 和也;村田 達也;野尻 秀昭;X.Dong
  • 通讯作者:
    X.Dong
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

清水 謙多郎其他文献

次世代シーケンサーデータの解析手法 第20回 RNA-seqカウントデータの性質と統計モデル
下一代测序仪数据的分析方法第20部分:RNA-seq计数数据的属性和统计模型
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    0
  • 作者:
    牧野 磨音;坂本光央;清水 謙多郎;門田 幸二
  • 通讯作者:
    門田 幸二
Haplotype exhaustive prediction of SRK/SP11 complex structure in Brassicaceae using a modified MSA
使用改进的 MSA 对十字花科 SRK/SP11 复合结构进行单倍型详尽预测
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    澤 知希;森脇 由隆;寺田 透;村瀬 浩司;高山 誠司;清水 謙多郎
  • 通讯作者:
    清水 謙多郎
次世代シーケンサーデータの解析手法 第 11 回 統合データ解析環境 Galaxy
下一代测序仪数据分析方法 第11部分 集成数据分析环境 Galaxy
  • DOI:
  • 发表时间:
    2017
  • 期刊:
  • 影响因子:
    0
  • 作者:
    達郎 大田;朋子 寺田;清水 謙多郎;幸二 門田
  • 通讯作者:
    幸二 門田
次世代シーケンサーデータの解析手法 第19回 R Markdown
新一代测序仪数据分析方法19th R Markdown
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    牧野 磨音;清水 謙多郎;門田 幸二
  • 通讯作者:
    門田 幸二
リン酸化によるHP1αの液-液相分離機構の解明
通过磷酸化阐明 HP1α 的液-液相分离机制
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    古川亜矢子;米澤 健人;根上 樹;吉村 ゆり子;林 亜紀;中山 潤一;安達 成彦;千田 俊哉;清水 謙多郎;寺田 透;清水 伸隆;西村 善文
  • 通讯作者:
    西村 善文

清水 謙多郎的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('清水 謙多郎', 18)}}的其他基金

Docking prediction and design of peptides by molecluar simulation and deep learning
通过分子模拟和深度学习进行肽的对接预测和设计
  • 批准号:
    21K12122
  • 财政年份:
    2021
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
Prediction and analysis of intrinsically disordered regions in membrane proteins
膜蛋白本质无序区域的预测和分析
  • 批准号:
    17F17050
  • 财政年份:
    2017
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows
タンパク質間相互作用部位予測手法の開発
蛋白质-蛋白质相互作用位点预测方法的发展
  • 批准号:
    07F07417
  • 财政年份:
    2007
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows
高精度のドッキング機能を有するタンパク質間相互作用予測システムの開発
开发具有高精度对接功能的蛋白质-蛋白质相互作用预测系统
  • 批准号:
    18016007
  • 财政年份:
    2006
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
高精度のドッキング機能を有するタンパク質間相互作用予測システムの開発
开发具有高精度对接功能的蛋白质-蛋白质相互作用预测系统
  • 批准号:
    17017014
  • 财政年份:
    2005
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
ホモロジーモデリングとアビニシオ法の統合による高精度タンパク質構造予測手法の開発
结合同源建模和阿比尼西奥方法开发高精度蛋白质结构预测方法
  • 批准号:
    16014204
  • 财政年份:
    2004
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
ホモロジーモデリングとアビニシオ法の統合による高精度タンパク質構造予測手法の開発
结合同源建模和阿比尼西奥方法开发高精度蛋白质结构预测方法
  • 批准号:
    15014207
  • 财政年份:
    2003
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
大規模分散データの効率的な共有を実現する並列コンピューティング環境の開発
开发实现大规模分布式数据高效共享的并行计算环境
  • 批准号:
    15017228
  • 财政年份:
    2003
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
大規模分散データの効率的な共有を実現する並列コンピューティング環境の開発
开发实现大规模分布式数据高效共享的并行计算环境
  • 批准号:
    14019029
  • 财政年份:
    2002
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas
タンパク質の局所構造情報を利用したab initio立体構造・機能予測手法の開発
利用蛋白质局部结构信息开发从头算三维结构/功能预测方法
  • 批准号:
    14015208
  • 财政年份:
    2002
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research on Priority Areas

相似海外基金

Construction of Pipeline for Integrated Metabolome Analyses of Kidney Disease
肾脏疾病综合代谢组分析流程的构建
  • 批准号:
    22K08317
  • 财政年份:
    2022
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
On Dataset Diversity for Achiving High Reliability of Machine Learning Software
论实现机器学习软件高可靠性的数据集多样性
  • 批准号:
    18H03224
  • 财政年份:
    2018
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Development of Metrics Based on Complex Network Indicators to Predict Quality Changes in Derivative System Development
开发基于复杂网络指标的指标来预测衍生系统开发中的质量变化
  • 批准号:
    17KT0122
  • 财政年份:
    2017
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
Latency Estimation based on Server Resource Usage for Virtualized Data Center Networks
基于虚拟化数据中心网络服务器资源使用情况的延迟估计
  • 批准号:
    16K16045
  • 财政年份:
    2016
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Grant-in-Aid for Young Scientists (B)
Integrated Framework of Security and Privacy Requirements Engineering(Fostering Joint International Research)
安全和隐私需求工程综合框架(促进国际联合研究)
  • 批准号:
    15KK0018
  • 财政年份:
    2016
  • 资助金额:
    $ 4.29万
  • 项目类别:
    Fund for the Promotion of Joint International Research (Fostering Joint International Research)
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了