面向算力网络的跨域数据管理方法
跨域算力网络希望整合多个算力中心的计算和数据资源，但现有的方案对跨域文件和数据管理关注不够。提出了一种轻量级的跨域算力网络数据管理方案：通过文件系统协议转换，接入远程算力中心的并行文件系统存储资源；算力中心内部的存储资源作为一种补充，应对高IOPS应用；通过容器绑定技术，将远程存储挂载并绑定到指定目录。基于该方案的原型系统已经在高校校级计算平台部署运行。实测数据和用户体验显示，该方案能够满足常见高性能计算应用需求。...
| Main Author: | |
|---|---|
| Format: | Article |
| Language: | zho |
| Published: |
China InfoCom Media Group
2024-03-01
|
| Series: | 大数据 |
| Subjects: | |
| Online Access: | https://www.infocomm-journal.com/bdr/CN/10.11959/j.issn.2096-0271.2023068 |
| _version_ | 1827298831392309248 |
|---|---|
| author | 鲁蔚征, 戴奇志, 张策 |
| author_facet | 鲁蔚征, 戴奇志, 张策 |
| author_sort | 鲁蔚征, 戴奇志, 张策 |
| collection | DOAJ |
| description | 跨域算力网络希望整合多个算力中心的计算和数据资源，但现有的方案对跨域文件和数据管理关注不够。提出了一种轻量级的跨域算力网络数据管理方案：通过文件系统协议转换，接入远程算力中心的并行文件系统存储资源；算力中心内部的存储资源作为一种补充，应对高IOPS应用；通过容器绑定技术，将远程存储挂载并绑定到指定目录。基于该方案的原型系统已经在高校校级计算平台部署运行。实测数据和用户体验显示，该方案能够满足常见高性能计算应用需求。 |
| first_indexed | 2024-04-24T15:22:54Z |
| format | Article |
| id | doaj.art-e2eeb6b3950347c68f4c2c0c56a22d9b |
| institution | Directory Open Access Journal |
| issn | 2096-0271 |
| language | zho |
| last_indexed | 2024-04-24T15:22:54Z |
| publishDate | 2024-03-01 |
| publisher | China InfoCom Media Group |
| record_format | Article |
| series | 大数据 |
| spelling | doaj.art-e2eeb6b3950347c68f4c2c0c56a22d9b2024-04-02T07:41:22ZzhoChina InfoCom Media Group大数据2096-02712024-03-011029410810.11959/j.issn.2096-0271.2023068面向算力网络的跨域数据管理方法鲁蔚征, 戴奇志, 张策跨域算力网络希望整合多个算力中心的计算和数据资源，但现有的方案对跨域文件和数据管理关注不够。提出了一种轻量级的跨域算力网络数据管理方案：通过文件系统协议转换，接入远程算力中心的并行文件系统存储资源；算力中心内部的存储资源作为一种补充，应对高IOPS应用；通过容器绑定技术，将远程存储挂载并绑定到指定目录。基于该方案的原型系统已经在高校校级计算平台部署运行。实测数据和用户体验显示，该方案能够满足常见高性能计算应用需求。https://www.infocomm-journal.com/bdr/CN/10.11959/j.issn.2096-0271.2023068算力网络并行文件系统数据管理异构存储资源 |
| spellingShingle | 鲁蔚征, 戴奇志, 张策 面向算力网络的跨域数据管理方法 大数据 算力网络 并行文件系统 数据管理 异构存储资源 |
| title | 面向算力网络的跨域数据管理方法 |
| title_full | 面向算力网络的跨域数据管理方法 |
| title_fullStr | 面向算力网络的跨域数据管理方法 |
| title_full_unstemmed | 面向算力网络的跨域数据管理方法 |
| title_short | 面向算力网络的跨域数据管理方法 |
| title_sort | 面向算力网络的跨域数据管理方法 |
| topic | 算力网络 并行文件系统 数据管理 异构存储资源 |
| url | https://www.infocomm-journal.com/bdr/CN/10.11959/j.issn.2096-0271.2023068 |
| work_keys_str_mv | AT lǔwèizhēngdàiqízhìzhāngcè miànxiàngsuànlìwǎngluòdekuàyùshùjùguǎnlǐfāngfǎ |