22–26 Jun 2026
HEPS高能同步辐射光源
Asia/Shanghai timezone

PhotonZip:面向同步辐射光源的高效数据缩减技术与软件

23 Jun 2026, 16:10
15m
中环102报告厅 (HEPS高能同步辐射光源)

中环102报告厅

HEPS高能同步辐射光源

北京市怀柔区
数据管理与存储 数据管理与存储

Speaker

鼎文 陶 (中国科学院计算技术研究所)

Description

同步辐射光源实验产生的海量成像数据,给 I/O 与存储系统带来了巨大压力。现有压缩方案难以兼顾光源场景下对高吞吐、高保真及多算法灵活集成的需求。为此,我们研制了面向光源数据流的压缩工具包 PhotonZip。PhotonZip 从三个维度实现统一支撑:支持 CPU/GPU 异构环境的统一部署;覆盖无损与有损压缩的统一策略;集成传统与 AI 压缩方法的统一软件框架。在无损压缩模式下,PhotonZip 显著提升了压缩与解压缩速度,并大幅提高了数据 I/O 性能。通过提供 Python API 与 HDF5 Filter 等标准化接口,PhotonZip 构建了涵盖在线缩减、存储传输与后分析处理的完整工具链,为同步辐射光源场景下的数据压缩提供高性能、可扩展的软件解决方案。

Primary authors

雯静 黄 (中国科学院计算技术研究所) 鼎文 陶 (中国科学院计算技术研究所)

Presentation materials