我国软件评测技术研究起步于1981~1985年， 随着数字化时代的来临，软件评测正在成为一个 快速发展的新兴产业。正是由于软件评测行业的 发展过于迅速，导致业内出现良莠不齐的现象， 问题主要集中在以下几点：一是人才短缺。赛迪智库信息化与软件产业研究所发布的《关键软件 领域人才白皮书(2020)》显示，到2025年，我国软件产业规模将达12.8万亿元，软件行业人才总需求将达890万人，新增人才缺口达192万人。二是测试深度低。因白盒测试使用的测试工具价格昂贵，并对测试人员技术要求高，目前国内由于大部分软件评测机构只能开展黑盒测试，无法直接从源代码层面去开展评测。三是测试数据准确性低。多数使用人工或半人工方式录入测试数 据，降低了数据的准确性。四是缺乏优化方案。传统软件评测项目进行评测之后，仅出具结果报告，并未对软件的缺陷提出合理建议，导致软件优化程度不高。
整体解决方案
智能制造评测业务操作中心是中国质量认证 中心(CQC)设立的智能制造领域综合技术服务平台，软件评测实验室是其下属专业实验室(以下简称“CQC软评实验室”)。实验室现已通过 CNAS/CMA评审，可利用GB/T 25000.51-2016、GB/ T 34975-2017、GB/T 34590.6-2017 、 GB/T 28171- 2011、IEC 62304:2006等10项检测标准、104项检测 参数对基础软件和应用软件开展评测，覆盖信息化系 统、源代码、嵌入式软件、道路车辆软件、医疗器械 软件等产品，可为客户提供验收测试、登记测试、确认测试、漏洞扫描、性能专项测试、代码安全审计、 渗透测试等服务，业务范围涵盖率高达80%~90%。同时，依托CQC的平台优势，CQC软评实验室可为 客户提供信息系统相关培训和咨询、软件和信息安全 体系认证等整体解决方案。
实例展示
本文以桂林旅游学院海外教育云校园平台软件评 测项目为例，通过对评测过程中的方法和关键点的介 绍，说明软件评测是如何在保障企业数字化升级中 发挥作用的。桂林旅游学院为便于东盟学生在线学习 培训和海外校区(教学点)服务管理，委托外部公司 进行第三方软件开发，要求该云平台具备国际学生招 生、录取、学籍管理、教学管理等功能，支持国际学生的注册、缴费、课程、成绩和学籍的综合管理。CQC软评实验室受客户委托，对开发完成的平台进行 验收，确认其是否满足需求。评测工程师依照国标对 平台的功能性、性能效率、兼容性、易用性、信息安 全性等八大模块进行测试，本文选取功能性和性能效 率两大典型模块进行介绍。
第一，功能测试。该平台主要功能需求包括：支 持学生、老师、教务管理者和平台管理员等不同角色 权限登录该平台;应用界面支持中英文显示。考虑到该云校园平台软件具有管理权限复杂和业 务应用场景广泛的特点，评测工程师以多台计算机登 录作为测试方案。评测工程师以教务管理员身份成功 登录该平台，对教务管理系统各个功能点进行测试。采取的黑盒测试方法本来需要输入所有可能的数据来 验证系统功能性，但实际测试时，运用所有数据通过 穷举法进行测试并不现实，且功能测试的一个固有属 性就是沉余问题，可能导致有的需求测试覆盖不全， 而另一些需求过度测试。因此，软评实验室结合采用 等价类划分和边界值分析等方法来解决测试数据的输 入问题，用尽可能少的测试用例进行全覆盖测试，提 高测试效率。其中，在等价类划分法中同时采用有效 等价类和无效等价类，用有效等价类验证平台处理合 理数据的处理能力，用无效等价类验证平台处理无效 数据处理能力;再用边界值分析法作为等价划分法的 补充，选择了多组边界数据将测试覆盖至平台每个边 界。另一功能需求“应用界面支持中英文显示”的测 试较为简单，以多环境接入作为测试方案即可。
第二，性能效率测试。性能效率方面，根据桂 林旅游学院要求，该平台需满足3000人同时在线学 习，且使用技术环境需具有良好的流畅度。针对体 系复杂、负载量大、细节多样化的特征，评测工程 师选择LoadRunner作为测试工具，编制运行测试脚 本模拟3000人在线学习的高强度环境，并观察用户 并发数量、软件响应时间、每秒的点击率等关键指 标来检验平台性能效率能力。如附图所示，测试过 程中，分阶段采用了负载测试和压力测试。负载测 试设定为0~1分钟之间，每次增加500人，观察测试平台在不同负载条件下的可接受性;压力测试设定 为1~6分钟之间，3000人同时登陆，观察测试平台 在异常或极限状态下的可接受性。在附图的模拟测 试情况下，该平台运行操作的平均响应时间为4秒左 右，每秒点击率为125.所得结果显示，该测试平均 响应时间低于软评行业内良好体验平均响应时间， 满足流畅性要求;每秒点击率高且稳定，符合3000 人同时在线学习且使用技术环境具有良好的流畅度 的设计要求。
CQC软评实验室通过对桂林旅游学院海外教育云 校园平台的功能、性能效率等进行测试和评价，客观 地评价了软件功能完整性和实际应用效果。通过挖掘 系统中可能存在的不足，确保该平台功能都得以实现 并能正常运行，提高了用户对该平台的使用信心。而 且实验室根据测试结果为用户提供客观、公正、权威 的第三方验收测试报告以及优化建议，有利于企业未 来升级改造提升平台性能，同时出具的检测报告可作 为开发完成的工程项目全面验收的重要依据
展望
未来，软评实验室将以严谨的工作态度和专业的 技术水准，充分发挥CQC在质量服务体系方面的强大 优势，打造专业软件评测平台，为企业“智改数转” 赋能，为国家高质量发展贡献自己的力量。
(中国质量认证中心智能制造评测业务操作中心)
