计算机软件及计算机应用论文_基于Hadoop - 中国测试杂志社投稿_期刊论文发表|版面费|电话|编辑部- 中国测试

来稿应自觉遵守国家有关著作权法律法规，不得侵犯他人版权或其他权利，如果出现问题作者文责自负，而且本刊将依法追究侵权行为给本刊造成的损失责任。本刊对录用稿有修改、删节权。经本刊通知进行修改的稿件或被采用的稿件，作者必须保证本刊的独立发表权。一、投稿方式： 1、请从我刊官网直接投稿。 2、请从我编辑部编辑的推广链接进入我刊投审稿系统进行投稿。二、稿件著作权： 1、投稿人保证其向我刊所投之作品是其本人或与他人合作创作之成果，或对所投作品拥有合法的著作权，无第三人对其作品提出可成立之权利主张。 2、投稿人保证向我刊所投之稿件，尚未在任何媒体上发表。 3、投稿人保证其作品不含有违反宪法、法律及损害社会公共利益之内容。 4、投稿人向我刊所投之作品不得同时向第三方投送，即不允许一稿多投。 5、投稿人授予我刊享有作品专有使用权的方式包括但不限于：通过网络向公众传播、复制、摘编、表演、播放、展览、发行、摄制电影、电视、录像制品、录制录音制品、制作数字化制品、改编、翻译、注释、编辑，以及出版、许可其他媒体、网站及单位转载、摘编、播放、录制、翻译、注释、编辑、改编、摄制。 6、第5条所述之网络是指通过我刊官网。 7、投稿人委托我刊声明，未经我方许可，任何网站、媒体、组织不得转载、摘编其作品。

计算机软件及计算机应用论文_基于Hadoop

作者:

关键词:

摘要：

文章目录

1 测试需求分析

2 系统架构设计

2.1 管理模块设计

2.2 处理模块设计

3 亮点分析

3.1 测试业务与测试平台分离

3.2 实现多环节分布式并行处理

3.3 业务数据托管在Hadoop

3.4 支持多测试任务同时执行

4 效果分析

5 结束语

文章摘要:针对人脸识别算法研究过程中测试效率低下的问题，基于分布式技术，设计并实现了通用的分布式大数据测试平台。为了提高人脸识别算法的大数据测试的执行效率，提高测试结果统计计算的执行效率，基于RabbitMQ设计分布式并行执行架构，利用Hadoop集群的MapReduce框架进行分布式并行计算。利用Java语言的Spring框架开发测试平台，将测试代码与测试图片托管于Hadoop集群的HDFS文件系统，实现了测试业务与测试平台的分离，提高了平台的通用性。该测试平台不仅实现单个测试任务的分布式执行而且满足多个测试任务同时执行，对测试任务以及测试相关的代码与数据进行有效的管理。与传统测试方法相比，测试效率提高10余倍，测试图片的数量越大测试效率提升越明显。该测试平台具有业务通用性、容量可扩展性，对于其他人工智能算法的大量数据测试具有借鉴意义与参考价值。

文章关键词:

项目基金:《中国测试》网址: http://www.zgcszzs.cn/qikandaodu/2022/0928/2405.html