Development of integrated Analysis System for Space and Astronomical Science combined with Mass Database

结合海量数据库的空间天文科学综合分析系统开发

• 批准号: 16300037
• 负责人: MIURA Akira
• 金额: $ 9.66万
• 依托单位: Japan Aerospace Exploration Agency
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2004
• 资助国家: 日本
• 起止时间: 2004 至 2005
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-16300037/
• 关键词: Space Science; Astronomy; Mass Database; Data Analysis; High-speed Network; Super SINET; Virtual Observatory

1.Technical evaluation of data sharing among remote sitesWe compared various file sharing methods which can be used among remote sites. While SRFS (Shared Rapid File System) efficiently transfers mass data and guarantees the coherency of the data, the performance degrades when the data are so small. NFS shows better results for small data transfer. Though NFS does not guarantee the coherency of data, we found it possible to avoid the incoherency as for the files ISAS (Institute of Space and Astronautical Science) provides. Data sharing methods derived from GRID seems incompatible with analysis software used here in ISAS.2.Integrated Analysis EnvironmentWe constructed the Data Analysis Network System (DANS) using NFS in conjunction with rapid file sharing over SAN. We cooperate with National Astronomical Observatory Japan (NAOJ) to connect databases in ISAS and ones in NAOJ each other. We developed jMAISON (Java-based Multi-wavelength Astronomical Image Service ON-line) in collaboration with SMOKA team in NAOJ. jMAISON is an intermediate broker service for users and multiple remote-astronomical data (images and catalogs) servers on WWW.We rebuilt Data Archive and Transfer System (DARTS) on the basis of commonly used framework, and developed an interface for Virtual Observatory (VO), which is an international standard for astronomical data services.We estimated a data processing environment which will be distributed in ISAS and NAOJ. We found it possible to transfer files between ISAS and NAOJ at the rate of 300Mbps or more using NFS with commonly used personal computers.We constructed an integrated environment for analysis, which provides various tools together with a series of space and astronomical science data. Several computers not only is ISAS but also at external institutes share the environment. This system decreases a management cost, and improves a working efficiency.

1.远程站点之间数据共享的技术评估我们比较了各种可以在远程站点之间使用的文件共享方法。虽然SRFS（共享快速文件系统）可以有效地传输海量数据并保证数据的一致性，但当数据较小时，性能会下降。 NFS 对于小数据传输显示出更好的结果。虽然 NFS 不保证数据的一致性，但我们发现可以避免 ISAS（空间与宇航科学研究所）提供的文件的不一致性。源自GRID的数据共享方法似乎与ISAS中使用的分析软件不兼容。2.集成分析环境我们使用NFS结合SAN上的快速文件共享构建了数据分析网络系统（DANS）。我们与日本国家天文台（NAOJ）合作，将ISAS和NAOJ的数据库相互连接。我们与 NAOJ 的 SMOKA 团队合作开发了 jMAISON（基于 Java 的多波长天文图像在线服务）。 jMAISON是为WWW上的用户和多个远程天文数据（图像和目录）服务器提供的中间代理服务。我们在常用框架的基础上重建了数据归档和传输系统（DARTS），并开发了虚拟天文台（VO）接口），这是天文数据服务的国际标准。我们预计数据处理环境将分布在ISAS和NAOJ中。我们发现可以使用NFS与常用的个人计算机在ISAS和NAOJ之间以300Mbps或更高的速率传输文件。我们构建了一个集成的分析环境，它提供了各种工具以及一系列空间和天文科学数据。不仅是ISAS，外部机构的多台计算机也共享该环境。该系统降低了管理成本，提高了工作效率。

项目成果

Development of Public Data Archive System for Subaru Telescope

斯巴鲁望远镜公共数据档案系统的开发

• 发表时间: 2004
• 期刊: Publications of the National Astronmical Observatory of Japan Vol.7
• 作者: Hajime Baba;et al.
• 通讯作者: et al.

宇宙科学データベースDARTSの取り組みと成果-ASTRO-F向け開発-

空间科学数据库DARTS的举措和成果-ASTRO-F的开发-

• 发表时间: 2005
• 期刊: 日本天文学会秋期年会講演予稿集
• 作者: 長瀬文昭;他;Fumiaki Nagase et al.;長瀬 文昭;田村 隆幸
• 通讯作者: 田村 隆幸

宇宙科学・天文学研究部会【宇宙科学研究班】

空间科学与天文学研究小组委员会〔空间科学研究组〕

• 发表时间: 2005
• 期刊: 学術情報ネットワーク研究成果報告集
• 作者: 長瀬文昭;他
• 通讯作者: 他

すばる望遠鏡公開データアーカイブシステムの開発(3)

斯巴鲁望远镜公共数据存档系统开发（3）

• 发表时间: 2004
• 期刊: 国立天文台報 7
• 作者: 馬場 肇;他
• 通讯作者: 他

宇宙科学統合解析環境の構築とAstro-E2解析支援

空间科学综合分析环境构建及Astro-E2分析支持

• 发表时间: 2005
• 期刊: 日本天文学会秋期年会講演予稿集
• 作者: 長瀬文昭;他;Fumiaki Nagase et al.;長瀬 文昭;田村 隆幸;三浦 昭
• 通讯作者: 三浦 昭