|
|
|
题名
|
作者
|
年代
|
出处
|
被引量
|
| 1 | 基于数据库的文件系统管理工具设计与实现显示文摘传统的文件系统管理工具通过实时遍历文件目录树获取文件元数据信息,以实现管理监视功能。但对于大型文件系统,元数据信息的获取需要耗费大量时间,传统管理工具无法适应当前大数据背景下的管理需求。为此,基于数据库技术设计一种新的文件系统管理工具。该工具集成Robinhood策略引擎与TORQUE作业管理系统,通过分布式并行计算获取文件系统元数据信息,并将信息保存到My SQL数据库,同时基于数据库中的元数据信息,实现文件系统的监视、管理和备份功能。实验结果表明,采用分布式并行计算能够充分利用集群的计算资源,提高文件系统的遍历速率,保证文件系统监视、管理和备份的顺利进行。 | 石京燕 陈德清 | 2015 | 计算机工程2015，41，5： | 5 |
| 2 | 基于R-GMA体系结构的Open PBS记账系统显示文摘介绍了基于R-GMA体系结构的记账系统,在Open PBS环境下实现了对用户/组等细粒度的记账功能,系统以图表方式直观地显示了各种情况下计算集群资源使用情况的统计信息。由于采用R-GMA体系结构,因此该系统可以移植到网格计算环境中。 | 石京燕 孙功星 | 2008 | 计算机工程2008，34，4： | 3 |
| 3 | 利用ARC CE整合异构计算平台显示文摘ARC(Advanced Resource Connector)CE(Computing Element)是Nordugrid开发的网格中间件中的对计算资源管理的组件。ARC CE相对于其他的对等计算资源网格组件,具有轻量级,易管理,认证简单,易扩展的特性,因此越来越广泛地被应用于各类网格应用平台上。高能物理实验ATLAS具有数据量大,计算量大的特点,采用了网格计算的方式整合了位于全球上百个计算中心的15万个CPU核进行协同计算。随着ATLAS Run2阶段开始,其所需计算资源急速增长,因此ATLAS在积极探索使用云计算资源,超算资源(HPC),志愿计算资源等。如何将这些异构的计算资源整合到ATLAS传统的网格计算平台,成为一个急需解决的重要问题。ARC CE由于所具有的易扩展和轻认证的属性,于是成为这一解决方案的核心组件。本文将以志愿计算为例,阐述如何利用ARC CE将动态的、不可信的志愿计算资源平台整合到现有的ATLAS网格计算环境,实现对用户和网格服务的双透明性。 | 伍文静 石京燕 | 2016 | 科研信息化技术与应用2016，7，3： | 0 |
| 4 | 高能物理计算环境概述显示文摘本文介绍了高能物理的计算需求,探讨了典型的高能物理计算模型,详细介绍了常用的计算技术和系统,包括前端登录集群、海量存储系统、作业管理系统、虚拟计算系统、备份与分级存储、用户管理、软件自动部署、系统监视、网格系统等。对高能物理计算环境现状进行总结,并提出展望。 | 程耀东 石京燕 陈刚 | 2014 | 科研信息化技术与应用2014，5，3： | 12 |
| 5 | 基于Lustre的BES集群存储系统显示文摘满足BES计算庞大的I/O访问需求,需要先进的存储体系结构和合理的配置。描述了基于Lustre的BES集群存储系统的设计和实现。介绍了Lustre的组成和作为PetaScale级分布式文件系统的设计特点,描述了BES集群存储系统的具体实现,分析了系统的负载特征。分析了硬件级、操作系统级和文件系统级的性能影响因素,并针对关键因素的不同配置做了测试,提出性能优化方案。 | 汪璐 石京燕 程耀东 | 2010 | 核电子学与探测技术2010，30，12： | 4 |
| 6 | 大规模BES作业提交与管理系统的设计与实现显示文摘针对BES作业的特点设计了大规模高能物理作业的提交与管理系统,目的是为物理学家提供一个简洁高效的作业管理平台。系统根据用户要求可将作业发送至不同的计算环境运行,并实时监控作业运行状态,对发生错误的作业自动重新提交。针对数据密集型物理作业的特点,可以将大作业拆分成大量小作业以实现大规模作业提交,从而达到高效并行运行目的。系统采用Web Service技术,选用GSOAP作为传输协议,屏蔽了计算机的异构性,为用户提供方便灵活的多平台作业提交模式。 | 石京燕 梁栋 孙功星 陈刚 | 2010 | 核电子学与探测技术2010，30，4： | 0 |
| 7 | 基于Elasticsearch的实时集群日志采集和分析系统实现显示文摘传统日志工具采集时间长、处理效率低下,无法支持大规模集群日志采集和分析需求。我们从实际需求出发,结合Flume和Elasticsearch设计实现了集群日志的实时采集和快速查询分析系统。通过预设日志规则库,实时统计并展示集群系统的运行状态,提供预警信息。 | 胡庆宝 姜晓巍 石京燕 程耀东 梁翠萍 | 2016 | 科研信息化技术与应用2016，7，3： | 12 |
| 8 | 大型高能物理计算集群资源管理方法的评测显示文摘高能物理数据由物理事例组成,事例之间没有相关性。可以通过大量作业同时处理大量不同的数据文件,从而实现高能物理计算任务的并行化,因此高能物理计算是典型的高吞吐量计算场景。高能所计算集群使用开源的TORQUE/Maui进行资源管理及作业调度,并通过将集群资源划分成不同队列以及限制用户最大运行作业数来保证公平性,然而这也导致了集群整体资源利用率非常低下。SLURM和HTCondor都是近年来流行的开源资源管理系统,前者拥有丰富的作业调度策略,后者非常适合高吞吐量计算,二者都能够替代老旧、缺乏维护的TORQUE/Maui,都是管理计算集群资源的可行方案。在SLURM和HTCondor测试集群上模拟大亚湾实验用户的作业提交行为,对SLURM和HTCondor的资源分配行为和效率进行了测试,并与相同作业在高能物理研究所TORQUE/Maui集群上的实际调度结果进行了对比,分析了SLURM及HTCondor的优势和不足,探讨了使用SLURM或HTCondor管理高能物理研究所计算集群的可行性。 | 孙震宇 石京燕 姜晓巍 邹佳恒 杜然 | 2017 | 计算机科学2017，44，10： | 6 |
| 9 | 大规模用户登录服务的负载平衡实现显示文摘以SNMP协议和LDAP目录服务为基础,利用DNS服务对用户请求进行调度,该文提出了一套符合本地实际情况的大量用户登录的解决方案,并实现了一个完整的登录调度系统,很好地解决了集群、网格环境下的大量用户登录的负载平衡问题。 | 裴尔明 孙功星 石京燕 于传松 | 2006 | 计算机工程2006，32，8： | 6 |
| 10 | 一种改进的DRF算法对BESIII集群资源管理的优化显示文摘根据BESIII集群的实际需求,在测试和研究了不同类型的高能物理数据处理作业不同配置机器上的运行效果的基础上,提出了一种改进的DRF资源分配算法,加入了机器性能评级和作业类型匹配两个因素作为资源调度的依据,对算法进行实现并使用真实数据进行了实验测试。测试结果表明:新算法能够更加合理地分配资源,有效提高系统资源利用率,缩短作业运行时间。 | 霍菁 石京燕 孙功星 阚博文 | 2014 | 核电子学与探测技术2014，34，10： | 4 |
| 11 | 基于Linux的会话断点保存与恢复软件显示文摘基于blcr软件,在Linux内核层,设计会话断点保存与恢复软件。该软件可在同一个会话内、进程间实现同步断点保存与恢复,无须改变进程间的相互依赖关系。应用结果表明,将该软件集成到Torque/Maui集群管理和调度系统中,可对用户运行程序进行透明的断点保存与恢复。 | 管文 裴尔明 石京燕 孙功星 | 2010 | 计算机工程2010，36，8： | 1 |
| 12 | 基于OpenStack的虚拟资源调度技术研究显示文摘传统的高能物理计算系统基于物理机集群,主要通过Torque、Condor、LSF等资源管理和作业调度系统将作业调度到物理机器上运行,缺少对虚拟化计算的接口支持。我们选取OpenStack作为底层虚拟化平台,设计并实现上层调度系统与OpenStack之间的桥梁,采用推拉结合的作业运行方式,构建虚拟计算集群。 | 李海波 黄秋兰 石京燕 程耀东 | 2016 | 科研信息化技术与应用2016，7，3： | 0 |
| 13 | 电流互感器复合误差测试仪的设计显示文摘为采用国际标准中规定的直接法,对电流互感器复合误差进行快速、准确的测量,介绍一种新型的电流互感器复合误差测试仪。它以CPU8086为核心,设计了用于数据采集的前向通道,使其能自动检测、纠正运算放大器零漂以及增益偏移对测量精确度的影响;并采用离散富氏变换技术,实现电流互感器角差、比差的测量,为准确、快速测量电流互感器在高饱和工况下的角差、比差,提供了一个有效途径。 | 刘国贤 杨京燕 张建华 袁亚男 石永海 | 1994 | 现代电力1994，11，1： | 0 |
| 14 | 物理分析平台建设研究2013年度报告显示文摘2013年,大亚湾实验已经进入稳定取数阶段,物理分析平台的任务是针对不断增加的数据量,提高计算能力和存储能力;根据物理分析的需求,开发或改进探测器刻度算法和重建算法,进行数据和模拟的比较,并提高物理分析的效率。在计算环境方面,我们扩大了CPU和硬盘资源,开发了计算资源监视系统,建立了计算环境监控管理系统。在数据存储方面,该年度建成了一个574 TB的磁盘存储系统。系统基于在高性能计算领域广泛应用的开源Lustre分布式文件系统,完全采用商品服务器和存储设备构建。课题组针对大亚湾现场网络和计算环境设计并实现了大亚湾现场网络系统运行支撑平台。在大亚湾现场和高能所都部署了传输系统的数据缓冲模块。并添加了传输监视系统。在软件算法方面,通过对同时穿过不同探测器、实验厅的缪子事例的触发时刻延迟分析,得到了各探测器之间的时间延迟。通过强制触发数据得到了阻性板室探测器的层噪声率和模块噪声率。开发了MC Tuning软件框来管理模拟参数,通过xml文件和txt文件对不同的参数进行分组管理。根据大亚湾物理分析的特点,设计了新的软件框架,确定了数据模型的定义,并设计、实现了满足分析需求的事例缓存机制。 | 王萌 李卫东 何苗 齐法制 石京燕 | 2016 | 科技资讯2016，14，23： | 0 |
| 15 | Hadoop海量数据迁移系统开发及应用显示文摘当前高能物理实验产生的数据量越来越大,利用大数据处理平台Hadoop进行高能物理数据处理时,面临数据迁移的实际需求,而现有迁移工具不支持HDFS与其他文件系统间的数据传输,性能存在明显缺陷。从高能物理数据同步、归档等需求出发,设计和实现了一个通用的海量数据迁移系统,通过扩展HDFS数据访问方式,使用Map-Reduce直接在HDFS数据节点和其他存储系统/介质之间迁移数据。此外,系统设计实现了动态优先级调度模型,进行多任务的动态优先级评定和选取。该系统已经应用于大型高海拔空气簇射观测站(LHAASO)宇宙线等物理实验中的数据迁移,实际运行结果表明系统性能良好,能够满足各个实验的数据迁移需求。 | 尹乔 魏占辰 黄秋兰 孙功星 石京燕 | 2019 | 计算机工程与应用2019，55，13： | 14 |
| 16 | 大规模异构计算集群的双层作业调度系统显示文摘高能物理计算平台中的HTCondor和SLURM计算集群为多个高能物理实验提供数据处理服务,然而HTCondor并行作业调度效率较低、SLURM难以应对大量串行作业,且计算平台整体资源管理及调度策略过于简单。为满足高能物理计算集群高负荷运行的需求,在传统作业调度器上增加作业管理层,设计双层作业调度系统,通过高效调度串并行作业并兼顾实验组间资源的使用公平性,实现用户对作业的细粒度管理。测试结果表明,双层作业调度系统支持大批量高能物理作业的快速提交,并充分利用计算平台的总体资源,具有较好的作业调度性能。 | 孙震宇 石京燕 孙功星 杜然 姜晓巍 邹佳恒 谭宏楠 | 2020 | 计算机工程2020，46，1： | 3 |
| 17 | 应用于JUNO实验的容器技术研究显示文摘江门中微子实验(JUNO)是以测定中微子质量顺序、精确测量中微子混合参数为主要目的的一项物理科学前沿研究实验,其实验规模庞大,数据处理流程繁杂,需借助统一高效的离线计算平台对数据进行分析处理。为此,利用Docker容器分层的镜像技术将JUNO实验所需的环境依赖库打包在镜像文件中,为其制定针对不同操作系统作业的容器镜像,并将不同JUNO容器作业提交至作业调度器上运行,以实现资源共享。对物理机、容器、虚拟机3种平台的CPU性能、I/O性能及JUNO作业的实际运行效果进行对比测试,结果表明,Docker容器能够胜任JUNO离线数据处理,相比虚拟机具有更小的性能损耗。 | 谭宏楠 石京燕 邹佳恒 杜然 姜晓巍 孙震宇 | 2019 | 计算机工程2019，45，4： | 0 |
| 18 | 基于Openstack的高能物理虚拟计算集群系统及应用显示文摘高能物理计算是典型的高性能计算的应用,运行时需要大量的CPU资源。如果系统的CPU资源利用率不高,会使得计算效率大大下降。传统的高能物理计算环境资源管理是静态的,很难同时满足突发、批处理、CPU密集型、数据密集型等不同类型的作业对于不同的物理资源的需求。文中基于Openstack构建的虚拟计算集群系统,实现以CPU核为粒度进行调度作业,根据当前的作业和虚拟资源情况,动态调度资源,大大提高了资源的利用率。首先介绍本系统的相关研究工作,包括KVM虚拟机的测试优化、高能物理作业在虚拟机上的性能测试及高能物理公共服务云IHEPCloud,这些工作进一步表明了高能物理实验的数据分析在虚拟机上的性能是完全可以被接受的;然后详细介绍了虚拟计算集群系统的设计与实现;最后给出虚拟机计算集群在高能物理计算中的实际应用情况,证明了虚拟计算集群系统能很好地满足高能物理的计算需求。 | 黄秋兰 李海波 石京燕 孙震宇 伍文静 程耀东 程振京 | 2017 | 计算机科学2017，44，10： | 2 |
| 19 | 创新 瞄准职工需求——本刊探访基层工会工作新动态显示文摘12种工资集体协商模式为小微企业解难题、从职工诉求中寻找服务职工新模式、"互联网+"延伸工会服务"手臂"、制订公司"宪章"凝聚人心促共识、"诸葛会"开辟职工畅谈空间……新形势下,首都各级工会认真学习贯彻创新、协调、绿色、开放、共享的发展理念,以职工需求为标尺,以能力建设为核心,不断推动工会工作改革创新。本刊记者探访基层工会,挖掘工会工作中的新点子,为广大读者提供创新工会工作的思路与借鉴。 | 石海芹 付少玮 崔欣 张威 黄硕 朱京燕 王慧 董小红 | 2016 | 工会博览2016，0，16： | 1 |
| 20 | 高能物理实验的离线计算显示文摘高能物理研究组成物质的基本粒子及其相互作用规律,是物理学研究中的最前沿。当今,高能物理实验规模一般都很大,需要成百上千的科学家参加。高能物理实验的周期比较长,从实验设计到目标的实现通常会经历十几年甚至几十年的时间。实验产生的海量实验数据,需要借助先进的计算机技术来处理和分析,实验的需求也助推了计算机信息技术的不断发展。近年来,我国物理学家在以我为主的高能物理实验中取得了令人瞩目的成绩, | 李卫东 石京燕 汪璐 张晓梅 程耀东 齐法制 曾珊 颜田 | 2016 | 现代物理知识2016，28，3： | 1 |
您所在的机构暂未开通此部分的功能，请联系管理员