Conveners
科学计算与数据管理I
- 京燕 石 (高能所)
Dr
秋兰 黄
(高能所)
17/07/2019, 14:20
科学计算技术与平台
高能物理计算是数据密集型计算,对云计算有着强烈的需求。为更好的利用计算资源,提高资源利用率,高能物理界在云计算领域开展了大量的工作。本文将首先介绍各种虚拟化技术,包括KVM,容器及虚拟机管理软件Openstack等,接着重点介绍虚拟化技术与高能物理计算的结合与具体实践,最后给出虚拟化技术在高能物理实验的实际应用情况,很好的证明了虚拟化技术在灵活部署、提高资源利用率以及降低运维成本方面的优势。
Mrs
荣 和
(中国科学院计算机网络信息中心)
17/07/2019, 14:40
科学计算技术与平台
高性能计算环境聚合国内优秀的高性能计算资源,面向用户提供便捷的高性能计算服务。其中,系统核心软件SCE实现了环境资源聚合和统一调度,面向高性能计算用户提供了便捷可靠的新型服务方式;环境通用计算平台为用户提供了方便的Portal,用户可以直接通过Web提交自己的作业,同时平台可提供个性化的资源推荐服务;服务化应用开发平台中的REST风格的SCEAPI,支持跨平台和语言开发,提供计算、文件等多项资源的接口,应用平台可通过调用接口快速访问环境中资源。
中国科技云是《中国科学院“十三五”信息化发展规划》重点建设任务之一,目标是热情服务中国科技工作者,汇聚融合先进网络、高性能计算、科学数据、软件社区、信息资源,支撑信息化时代的科技创新,让计算与数据驱动科学发现。用户通过实名注册中国科技云通行证,即可进入中国科技云门户使用其提供的各项服务。
目前,高性能计算资源聚合服务的通用平台Portal...
Ms
歌 欧
(高能所)
17/07/2019, 15:00
科研信息化管理与系统
基于Kubernetes的容器化数据库服务平台
摘 要:提出了一种基于虚拟化容器技术的私有云数据库服务平台的设计方案,能够有效解决使用传统单机数据库面对多用户无法共享资源、按需分配、弹性扩展,使用公有云难于个性化定制、运维困难的问题。平台使用Kubernetes管理Docker集群提供数据库实例,结合域名和代理技术隔离用户与集群,实现无感知运维,将Web控制台与服务器资源集成配置,极大的降低管理难度,组合优化监控软件,从集群、硬件、数据库服务三方面保障服务平台可靠运行。
关键词:数据库;私有云;容器;Docker;DBaaS;
0 引言
...
Ms
娟 陈
(高能所)
17/07/2019, 15:20
科学数据存储与管理技术II
各高能物理实验通常会产生海量的数据,为满足其计算和存储需求,高能所计算中心一直开展高性能计算方面的研究,其中集群计算是高性能计算的重要方式之一。目前计算中心的本地集群包括约20000个CPU核,上千台服务器,20PB的磁盘存储和10PB的磁带存储。在江门中微子实验JUNO和高海拔宇宙线观测实验LHAASO建成后,计算中心每年需存储并处理的数据超过10PB。面对数据量的增多,集群规模必将继续扩大。面对现有的集群规模,快速准确的检测异常对于日常运维来说具有重要的意义和挑战。传统的异常检测方式包括:针对不同的服务器指标设定静态阈值;利用关键字搜索检查系统日志等。但是这些方式需要专业人员的经验,且无法适应多种场景,不具有可移植性。另外,这些方式无法适应负载的变化,也无法适应服务器升级等情况。异常相对于正常数据来说是少而不同的,它通常被分为空间异常和时序异常。空间异常指在不考虑时序信息的情况下...