Speaker
鼎文 陶
(中国科学院计算技术研究所)
Description
同步辐射光源实验产生的海量成像数据,给 I/O 与存储系统带来了巨大压力。现有压缩方案难以兼顾光源场景下对高吞吐、高保真及多算法灵活集成的需求。为此,我们研制了面向光源数据流的压缩工具包 PhotonZip。PhotonZip 从三个维度实现统一支撑:支持 CPU/GPU 异构环境的统一部署;覆盖无损与有损压缩的统一策略;集成传统与 AI 压缩方法的统一软件框架。在无损压缩模式下,PhotonZip 显著提升了压缩与解压缩速度,并大幅提高了数据 I/O 性能。通过提供 Python API 与 HDF5 Filter 等标准化接口,PhotonZip 构建了涵盖在线缩减、存储传输与后分析处理的完整工具链,为同步辐射光源场景下的数据压缩提供高性能、可扩展的软件解决方案。