基准测试

摘要： 设施农业是一种现代农业生产方式,是增强农业综合生产能力的重要途径。推动设施农业转型升级、提质增效,需实现“绿色”“低碳”“循环”“资源节约”“环境友好”的可持续发展目标。能源稳定性和能耗成本越来越成为设施农业提档升级面临的主要压力,也是很多设施农业项目无法实现盈利的关键障碍。因此,要尽快开展设施农业能耗效率基准测试,通过大量采集不同生产企业、设施类型和作物种类的能耗数据,进行纵横对比、深入分析,揭示多种设施农业模式背后的许多深层次的差别,建立高性能的行业基线和以能耗效率或生产力为度量的关键绩效指标。

摘要： 近年来,预训练语言模型的出现给自然语言处理领域带来了一场变革,成为人工智能技术发展的前沿和热点。大规模预训练可以有效缓解传统技术在特征工程方面面临的压力。通过学习通用语言表示,模型具备了语言理解和生成能力,几乎在所有自然语言处理任务上都取得了突破。因此,各类基准测试任务的效果显著提高,这展示了大规模预训练广阔的应用前景。庞大的参数规模使得模型具备了更强的能力,同时也对模型的构建、训练和应用落地提出了挑战。

摘要： 利用支配和指标度量结合的方式提出一种新的支配关系,通过该支配关系构造出新的多目标优化算法MOEA-PBI,该算法对多目标优化问题进行有效优化,从而得出一组可供选择的折中解。新算法与其他三种代表性的多目标进化算法一同在3,5和8目标的DTLZ基准测试问题上进行测试,结果表明MOEA-PBI算法具有较为优秀的收敛性和多样性。因此得出结论,MOEA-PBI算法是一种可以选择的多目标进化算法。

摘要： 简要介绍双共轭Frank-Wolfe算法、交叉口通行能力计算分配算法、动态用户均衡分配算法和基于仿真的动态分配算法4种交通分配算法的原理和实现过程。以广州东站周边地区为例,构建了基于PTV VISUM软件的测试平台。从分配算法的效率、收敛性和分配结果等方面进行评价分析,并开展以双共轭Frank-Wolfe算法为参照的基准测试。研究结果表明,基于仿真的动态分配算法和双共轭Frank-Wolfe算法的分配结果呈高度相关性,能够在可接受的耗时基础上,提供高质量的分配结果,助力交通模型从静态走向动态,实现从需求模型到运行模型的转变。

摘要： 近年来,国外学者尝试建立一个新的基准框架即LARG框架,将精益、敏捷、弹性和绿色理念整合在一起,作为企业及其供应链可持续发展政策的战略考量,国内学术界尚未涉及该框架的研究.LARG-P指数模型可从企业和供应链两个层面构建,以德尔菲法通过四轮调研确定相关权重系数,并以一个典型供应链作为案例进行实证检验,通过对供应链上三家企业的调研访谈来验证LARG-P指数作为基准测试工具的可行性.研究发现,在当前供应链可持续实践领域中,理论与实践仍明显脱节,企业及其供应链追求可持续发展过程中仍停留在绿色视角,而理论研究则认为,弹性视角甚至更全面的视角很有必要.供应链层面的可持续实践指数取决于全链成员的可持续实践行为和策略,除企业层面不容忽视的行为协同效应外,供应链层面的实践策略组合同样重要,应将精益实践、敏捷实践、弹性实践和绿色实践纳入统一框架中.在LARG框架下,可以通过调整某一实践策略的权重以应对策略转移的需要,不可顾此失彼或重心不清.基于LARG框架的可持续发展理念可以为管理者提供更全面的信息,以支持他们制定更合理的实践决策,从而推动供应链和企业两个层面经济、环境和社会效益等可持续目标的实现.

摘要： 容器是近年来新兴的虚拟化工具,可以实现资源和系统环境的隔离.容器能够帮助高性能计算应用程序将依赖打包进轻量级可移植的环境中,解决因软件配置无法在高性能计算资源上运行的问题.容器在虚拟化宿主机过程中具有性能开销,为了解GPU加速高性能计算平台上容器虚拟化技术的性能特征,使用标准基准测试工具对Docker容器进行了全面的性能评估,包括文件系统访问性能,并行通信性能及GPU计算性能.评估结果表明,在文件系统I/O开销及GPU计算开销方面,容器具备近乎原生宿主机的性能,容器的并行通信开销随着网络负载的增大而增大.在仅考虑性能的情况下,容器方案适用于通信负载不大的并行应用程序.

摘要： 为了实现资源和系统环境的隔离,近年来新兴了多种虚拟化工具,容器便是其中之一.在超算资源上运行的问题通常是由软件配置引起的.容器的一个作用就是将依赖打包进轻量级可移植的环境中,这样可以提高超算应用程序的部署效率.为了解基于IB网的CPU-GPU异构超算平台上容器虚拟化技术的性能特征,使用标准基准测试工具对Docker容器进行了全面的性能评估.该方法能够评估容器在虚拟化宿主机过程中产生的性能开销,包括文件系统访问性能、并行通信性能及GPU计算性能.结果表明,容器具备近乎原生宿主机的性能,文件系统I/O开销及GPU计算开销与原生宿主机差别不大.随着网络负载的增大,容器的并行通信开销也相应增大.根据评估结果,提出了一种能够发挥超算平台容器性能的方法,为使用者有针对性地进行系统配置、合理设计应用程序提供依据.

摘要： cqvip:实现中文文本纠错的目的是提高语言的正确性,同时减少人工校验成本。序列到序列的深度模型可以避免人工提取特征,减少人工工作量,对文本任务拟合能力强,特别是Transformer模型,近几年在自然语言处理领域大火大热。Transformer模型摒弃了传统序列到序列模型中CNN或RNN的方法和模块,开创性地将自注意力机制作为编解码器的核心,不仅训练速度快,而且解决了RNN处理长距离文本可能导致语义丢失的问题。本论文设计了一个基于Transformer的中文纠错系统,经过NLPCC2018官方基准测试集的测试,本论文设计的模型精确率达到27.19,召回率达到12.27,证明本系统有效。

摘要： 当前,人工智能芯片行业发展尚处于起步阶段,对人工智能芯片的测评研究仍处于探索阶段,国内外均未建立完善的测评体系,严重制约了人工智能芯片的发展.本文首先介绍了当前人工智能芯片主要的性能衡量和评价指标,总结了现有测评技术的难点,从架构、应用两个层面阐述了国内外测评研究的现状,并对现有方法进行了综合分析,最后对人工智能芯片测评技术未来的研究趋势进行了展望.

摘要： 实现中文文本纠错的目的是提高语言的正确性,同时减少人工校验成本。序列到序列的深度模型可以避免人工提取特征,减少人工工作量,对文本任务拟合能力强,特别是Transformer模型,近几年在自然语言处理领域大火大热。Transformer模型摒弃了传统序列到序列模型中CNN或RNN的方法和模块,开创性地将自注意力机制作为编解码器的核心,不仅训练速度快,而且解决了RNN处理长距离文本可能导致语义丢失的问题。本论文设计了一个基于Transformer的中文纠错系统,经过NLPCC2018官方基准测试集的测试,本论文设计的模型精确率达到27.19,召回率达到12.27,证明本系统有效。

摘要： 本文介绍了大数据和AI基准测试程序集背景、基准测试基本原理、基准测试方法学以及大数据和AI基准测试程序集:BigDataBench。

摘要： 当前企业级硬盘市场需求持续增长，而国内尚无存储相关基准测试平台。基于ODCC的企业级硬盘基准测试项目面向所有行业，项目组单位覆盖大部分市场。文中对主流测试方案，综合型测试、应用型测试、轨迹型测试进行对比，整理出测试关键点，即稳定性、可靠性、兼容性、功耗性。

摘要： 随着云计算技术的发展,高性能计算云(HPC in the Cloud)已得到学术界和产业界的关注.由于虚拟化技术带来的性能开销,高性能计算云面临着一些挑战.针对"高性能计算+云"的计算模式,分析了高性能计算云的优势,深入介绍了国内外基于基准测试的高性能计算云的性能评测、性能优化、能耗和成本效益等关键问题,得出了针对基准测试的高性能计算云研究的基本思路,并对当前面临的问题和今后的发展趋势进行了总结和展望.

摘要： 实时/历史数据库是火电厂监控信息系统(SIS)的平台基础。本文档综合多种实时/历史数据库的设计特点，提出了数据库基准测试规范建议，供数据库厂商进行软件测试、或者最终用户进行系统测试时参考。

摘要： 基于网络的入侵检测系统是网络安全的重要组成部分,其基准测试方法一直是国内外测评机构研究的热点.本文从功能测试、性能测试和安全性测试三个方面,详细地讨论了它的基准测试方法.其中,功能测试包括网络数据包分析能力和攻击检测能力测试;性能测试为在不同数据包长度和数量的背景流量下的攻击识别能力测试;安全性测试分为拒绝服务攻击和插入与规避攻击测试.

摘要： 首先简要介绍了Spark的相关知识，然后对Spark SQL进行基准测试并对性能进行比较分析，最后推荐硬件选型。

摘要： 阐述了随着云计算的快速发展,云文件系统在云计算基础设施中扮演着越来越重要的角色.目前业界产生不少面向云文件系统的性能评测工具.然而,大多数评测工具仅关注于传统的系统性能指标,比如IOPS和吞吐量,难以评估云文件系统在多租户环境下的性能隔离性.由于云环境I/O负载的动态性和异构性,所以准确评估云文件系统的隔离性变得更加困难.如何准确度量云文件系统的隔离性研究并不多见.提出了一种新型的云文件系统隔离性度量模型,并运用在一个基准测试工具Porcupine中.Porcupine通过模拟具有真实负载特征的I/O负载,实现对负载与性能的准确仿真并提高文件系统的测试效率.通过对Ceph文件系统的实验结果验证了本文提出的隔离性度量模型有效性.

摘要： 银行中间业务（BIB, Bank Intermediary Business）作为现代商业银行的主要业务之一，对服务器的性能有着严苛的要求。目前，服务器基准测试模拟的应用环境与银行中间业务应用存在差异，使测试环境下的性能评估与在银行实际应用下的性能相比精确性较低。rn 本文通过对实际银行中间业务的调研，建立银行中间业务模型BIBModel，设计并实现了基于BIBModel的可拓展、图形化的服务器性能基准评测程序BIBbench，最后利用BIBbench进行性能测试实验，验证了BIBModel的可行性，对目标服务器进行了性能实测分析。

摘要： 高性能计算的性能测试是计算机测试领域的重要问题,文章讨论了与高性能计算机有关的测试问题,包括组成和体系结构、高速网络、基准测试等四个方面,从上述角度讨论了高性能计算机的性能问题.

摘要： 无论是从规模、速度，还是复杂性方面，今天的数据中心都在日益提高。虚拟化、以太网光纤通道和40/100Gbps以太网等新技术都将着眼于帮助各类机构将多种流量类型-数据、存储、视频和语音-汇聚在单一的融合核心中。

摘要： 本公开的实施例提供了一种针对高性能共轭梯度基准测试(HPCG基准测试)的高效两层分块多色并行优化方法。所述方法包括，首先对稀疏矩阵进行层划分，得到多个层；再对具体所述层的矩阵数据分别进行分块多色处理，得到着色计算块；将每个所述层的颜色相同的所述着色计算块分别进行分组，得到多个并行组；按各层各着色的顺序，在多线程处理器上并行执行所述并行组。以此方式，不仅可以在强数据依赖的高斯赛德尔算法中挖掘足够的并行度以充分利用硬件特性发挥性能，同时较已有的分块多色并行算法大大提高了收敛速率，同时此求解顺序使得向量数据以及矩阵数据可以在连续层之间进行进一步复用，从而进一步大幅提升性能。

摘要： 本发明提供一种选取区块链基准测试程序性能评价指标的方法和系统。该方法包括：基于对区块链系统性能的重要性将微体系结构事件进行排序，构成第一微体系结构事件集合，所述微体系结构事件用于反映与微处理器架构交互的性能；从所述第一微体系结构事件集合寻找模糊集作为区块链基准测试程序的评价指标，其中该模糊集的成员对于区块链系统性能的重要性符合预定目标，该模糊集构成第二微体系结构事件集合。本发明能够有效地对区块链微体系结构事件重要性排序后的结果进行挑选，并利用所挑选出来的少量事件准确地对区块链基准测试程序进行相似性分析。

摘要： 本申请提供了一种基于软件定义广域网的端到端能力基准测试方法和装置，所述方法包括：清除边缘设备上已有配置；在边缘设备上配置管理接口使所述边缘设备被SD‑WAN控制器管理；建立测试装置与边缘设备的之间的管理链路；关闭所述边缘设备；向SD‑WAN控制器下发启动指令，使所述SD‑WAN控制器基于零配置模板通过管理接口启动所述边缘设备；通过与所述边缘设备建立的管理链路确定所述边缘设备是否正常启动。该方法能够在避免定制化和封闭化的前提下规范边缘设备能力测试验证。

摘要： 本发明提供一种基于基准测试工具的性能测试方法及系统，其中，基于基准测试工具的性能测试方法包括：获取待测器件的测试信息，所述测试信息包括：待测器件的所有的参数范围和相应的参数名称；根据所述测试信息，生成参数范围表格，以将所有的参数范围与相应的参数名称一一对应；根据所述参数名称和选取的基准测试工具的类型，获取参数范围的测试要求；根据所述测试要求，将所述参数范围表格转换为参数集，所述参数集包括所述基准测试工具可识别的数据表格；通过所述基准测试工具对所有的参数集进行基准测试，以得到测试结果。本发明能够提高性能测量的效率。

摘要： 本发明公开了一种数据库系统应用基准测试规范设计方法以及测试方法，用于多应用系统进行基准测试。针对多应用系统中的每一个应用系统收集使用需求；对包括两个以上操作场景的使用需求分解为多条；根据指定的关键变量，从使用需求中提取关键变量值；没有指定关键变量的使用需求被删除；针对每一种关键变量进行归一化操作；利用应用系统、操作场景、关键变量归一化值构建一条数据；对所有条数据进行聚类，聚类仅针对关键变量归一化值进行；确定每个类别所涉及的应用系统，将能够覆盖所有类别的最小应用系统集合作为典型应用系统，设计基准测试方案。本发明用最小集合典型应用系统代表大部分使用需求，在保证覆盖全面的基础上，降低测试的成本。

摘要： 本发明公开了基准测试系统的测试指标信息的界面展示方法及系统，用以解决现有的基准测试系统不能针对测试过程中的性能和功能测试数据进行检测的问题。该方法包括：建立基准测试系统的测试指标信息的数据结构体；实时更新测试过程中所述测试指标信息在TPC‑E负载下的结果数据；将所述在TPC‑E负载下的结果数据以动态图标的形式展示出来。采用本发明，可以实现实时监控基准测试系统的运行情况的功能。

摘要： 本发明公开了一种面向AArch64架构的CPU指令微基准测试方法及系统，本发明方法包括通过编写汇编代码，在汇编代码中循环调用若干条连续的被测试汇编指令，并通过特定规则指定被测试指令寄存器操作数的使用方式，以使连续调用的被测试指令之间存在数据先写后读依赖或者完全不存在任何数据依赖，从而使被测试指令以完全串行或者完全流水的方式执行。使用计时函数分别获取这两种汇编指令运行模式下的总耗时，以计算被测试指令在被测试平台上的指令延迟与指令吞吐量。本发明能够在不借助任何特殊硬件支持的情况下，准确获取AArch64架构CPU指令的延迟与吞吐量，适用于AArch64架构的所有指令集拓展，具备良好的可适用性。

摘要： 本申请涉及测试领域，具体公开一种性能基准测试方法，包括首先获取业务类型信息；基于预设测试策略确定与业务类型信息中业务类型对应的测试策略；确定测试环境，并分配对应测试集群；通过测试集群进行压测，并通过预设日志分析工具对压测过程进行监控，以及通过预设数据库对压测数据进行持久化存储。如此，根据业务类型的不同选择对应的测试策略，并且通过对测试过程进行监控，对测试数据进行持久化存储，方便后期基于存储的数据进行分析，从而直接得到性能变化情况。

摘要： 本发明提供了一种基于基准测试指标的服务器硬件性能自动检测方法，包括以下步骤：首先读取基准测试指标库，远程自动获取目标服务器硬件配置，生成指标测试预估值，创建服务器性能指标检测脚本，远程执行检测脚本，结构化处理性能指标检测结果，组合生成服务器性能检测报告。本发明提出的基于基准测试指标的服务器硬件性能自动检测方法和系统实现了在基准测试指标的模型下，自动化测试服务器性能，获取指标数据并分析处理指标数据，过程中自动生成检测测试脚本，结合应用服务器BMC Web API接口采集服务器信息，自动化生成测试报告，有效满足了服务器硬件性能基准指标测试的需求，实现测试过程快速自动化。

摘要： 针对剂量指导算法的自我基准测试。采用基准测试方法，其在治疗结果方面将来自一个或多个备选治疗指导算法的建议输出与当前实际治疗进行比较。当前策略的治疗结果被反映在实际BG结果中或进行概况分析。备选算法生成的剂量建议的治疗结果基于患者特定模型。可以直接比较这两组结果，或者可以使用作为惩罚或奖励某些结果的加权组合的性能评分来比较这两组结果。可以对累积结果（成对的结果或评分）应用统计检验，以确定算法是否优于用户的当前给药策略或备选策略。