JSS3を用いた科学衛星データ処理の検討
JAXAスーパーコンピュータシステム利用成果報告(2024年2月～2025年1月)
報告書番号: R24JEU30800
利用分野: 宇宙科学
- 責任者: 篠原育, 宇宙科学研究所 太陽系科学研究系
- 問い合せ先: nakahira.satoshi@jaxa.jp(nakahira.satoshi@jaxa.jp)
- メンバ: 海老沢 研, 中平 聡志, Sawczuck Miriam
事業概要
科学衛星が取得したデータの高次処理を効率的におこなう, またはそのための研究開発を実施する.
参照URL
なし
JAXAスーパーコンピュータを使用する理由と利点
科学データファイルは通常, 1日単位などに分割されており, 単純な並列化により処理速度がスケールしやすいため.
今年度の成果
1960-1970年代にアポロ計画により取得された月震データを公開するための高次処理を行った. データセットは100GB強程度であるが, 独自のバイナリ形式を処理するため, 過去のソフトウェア資産を活用しようとすると, 複数段階の変換が必要であるため手元の計算機環境では処理時間を要する. JSSを利用することで, ソフトウェアの書き換えなどの人的リソースを払うことなく１日以内に処理を完了することができた. そのおかげでデータの公開がスムーズに行えた.
成果の公表
なし
JSS利用状況
計算情報
- プロセス並列手法: １ファイルの変換を１行のコマンドラインにして, JSSから提供されているジョブ投入効率化ツールで並列実行した.
- スレッド並列手法: 非該当
- プロセス並列数: 20 - 50
- 1ケースあたりの経過時間: 12 時間
JSS3利用量
総資源に占める利用割合※1(%): 0.00
内訳
JSS3のシステム構成や主要な仕様は、JSS3のシステム構成をご覧下さい。
| 計算システム名 | CPU利用量(コア・時) | 資源の利用割合※2(%) |
|---|---|---|
| TOKI-SORA | 0.00 | 0.00 |
| TOKI-ST | 557.34 | 0.00 |
| TOKI-GP | 0.00 | 0.00 |
| TOKI-XM | 0.00 | 0.00 |
| TOKI-LM | 0.00 | 0.00 |
| TOKI-TST | 0.00 | 0.00 |
| TOKI-TGP | 0.00 | 0.00 |
| TOKI-TLM | 0.00 | 0.00 |
| ファイルシステム名 | ストレージ割当量(GiB) | 資源の利用割合※2(%) |
|---|---|---|
| /home | 22.50 | 0.02 |
| /data及び/data2 | 24019.00 | 0.11 |
| /ssd | 1747.00 | 0.09 |
| アーカイバシステム名 | 利用量(TiB) | 資源の利用割合※2(%) | J-SPACE | 6.80 | 0.02 |
|---|
※1 総資源に占める利用割合：3つの資源(計算, ファイルシステム, アーカイバ)の利用割合の加重平均.
※2 資源の利用割合：対象資源一年間の総利用量に対する利用割合.
ISV利用量
| 利用量(時) | 資源の利用割合※2(%) | |
|---|---|---|
| ISVソフトウェア(合計) | 0.00 | 0.00 |
※2 資源の利用割合：対象資源一年間の総利用量に対する利用割合.
JAXAスーパーコンピュータシステム利用成果報告(2024年2月～2025年1月)