电子发烧友网 > 人工智能 > 正文

AI测试需要注意什么

2019年07月31日 15:25 次阅读

AI智能是这两年互联网行业口号喊的最响亮的项目,AI简单的来说就是一个离开人类的操作和控制,利用程序代码和数据分析为依托实现自动智能化的效果。

AI智能让一个搜索引擎公司(百度)为之疯狂,可见其中的深奥与未来发展。让大家认为的骗子疯子贾跃亭,能一次又一次的死而复活,可见AI的无与伦比的魅力。

AI测试需要注意什么

其实AI已经进入人类日常生活中了,例如智能手机Siri,Alexa语音接口华为手机AI智能拍照,车站机场扫描等。通过大数据和数据科学实现数据存储的进步,实现最低误差和最高效率。

AI智能的实现,需要庞大的数据和硬件设施,包括大量的人力。一步一步检测,一步一步完善,一步一步接近智能。除了开发团队的付出,测试团队更要严谨把关,一个小小的BUG都可能让智能变智残。所以当涉及到AI系统的测试时,我们测试团队决不能松懈!

1、人工智能测试与传统软件测试有什么不同?

简单来说,具有AI的系统其实就是一个软件,但这种软件具有相应学习和改变其行为的能力。传统的软件功能测试涉及对给定输入集的预期输出与实际输出的测试。在人工智能的情况下,预期输出可能随着机器学习在一段时间内的进展而变化。因此,人工智能系统测试不同于传统的软件测试,测试人员应该准备好接受这种AI测试程序。

2、AI系统的测试输出是什么?

对于同一组输入,人工智能中的输出并不总是相同。因此,理解系统的底层——机器学习模型,并相应地更新测试用例非常重要。测试人员应该了解当数据输入系统时机器将如何学习和表现。测试人员应该能够在正面和负面情景中测试AI系统的行为。

3、测试AI系统的法律和道德要求

还记得好莱坞科幻电影《机械公敌》里的剧情吗?人类发明了超过人类本身的高级智能系统和机械人,结果差点造成人类被毁灭。虽然有夸张手段,但是AI智能确实是能威胁到人类自己的一个亦正亦邪产物。所以,在设计测试用例和场景之前,应该完全审查法律、道德和社会要求。测试人员有责任通过进行可能导致法律、道德和社会问题的负面测试来测试AI系统的这些方面。由此可见AI系统测试非常关键,应该非常仔细地进行,以确保我们正在构建对人类有用的机器。

4、AI算法测试

在AI中,机器分析数据模式并使用这些模式来构建规则,也称为启发式规则。这是人类大脑所做的类似操作,有助于人类做出决定。机器在加载数据并分析模式后,它会了解模式,并在收到模式时自行更新模式。因此,机器的行为及其AI算法不会总是表现得相同,因此我们不能指望输出始终是100%完美的。它取决于机器基于数据模式在一段时间内发展起来的启发式方法。

5、测试数据以测试AI算法

机器学习是人工智能的一部分,机器根据数据的类型和输入的模式来构建自己的知识。测试人员应仔细选择他们的测试数据来测试机器学习,以便他们输送到机器的数据模式应该与AI系统的预期输出相匹配。

6、AI架构和设计

AI系统测试人员应该对AI架构以及系统设计有充分的了解。这是因为在知道输出随着输入数据模式到AI系统的变化而变化的事实之后,它将帮助测试人员设计其测试用例。因此,将AI系统作为黑盒测试应该涉及架构和系统设计方面的知识。

7、需要严格的测试 AI 系统

AI系统的行为与传统软件不同,因为它们具有学习能力,因为它们可以提供数据。因此,为了对AI系统进行深入分析,在以不同模式批量提供数据之后执行严格测试非常重要。更有意义的数据被馈送到机器,它将开发启发式,机器可以执行决策,这是测试人员可以准确测试机器行为的地方。

8、输入相同但输出与以前不同

这是 AI 系统的理解行为,测试用例不能被声明为失败,因为实际的功能测试应该基于模式、规则和启发式而不是针对同一组输入的行为。在人工智能机器中相应地学习和改变其行为。

9、输出管理至关重要

在AI中,可以通过向其提供数据模式来动态地改进AI算法。测试机制可以作为训练AI系统并立即研究其影响的机会。训练有素的机器即改进的算法可以直接用于生产。但是,我们需要确保机器具有所需的知识。

10、回归测试

该数据集可用于之前测试过机器模式的回归测试。但重复测试用例可能不会一遍又一遍地获得相同的结果。因此,除非它是为一个全新的人工智能机器做的,否则回归测试可能不那么有效。回归测试应该基于AI算法行为,对被馈送到系统的数据集的测试。

新梦想软件测试总结:AI测试不同于传统的软件测试,测试人员在测试任何AI系统之前都要考虑到上面十点,避免所测之物出现BUG,更加要避免自己身上出现工作BUG。

下载发烧友APP

打造属于您的人脉电子圈

关注电子发烧友微信

有趣有料的资讯及技术干货

关注发烧友课堂

锁定最新课程活动及技术直播

电子发烧友观察

一线报道 · 深度观察 · 最新资讯
收藏 人收藏
分享:

评论

相关推荐

【5月12】不懂编程没关系,邀请您来学AI

不懂编程没关系,邀请您来学AI活动概述:本活动是现场讲座,由台湾知名AI教育专家、金门创新学院院长、台湾Android技
发烧友学院发表于 2019-05-24 00:00 2768次阅读
【5月12】不懂编程没关系,邀请您来学AI

华为将AI整合到其光伏业务中,将见证云、AI和5...

据外媒报道,继去年开发出首款基于人工智能(AI)的光伏逆变器后,华为打算进一步将AI整合到其光伏业务....
发表于 2020-05-08 15:40 32次阅读
华为将AI整合到其光伏业务中,将见证云、AI和5...

AI人工智能在配电网应用

智能环网柜对电力高效率高质量运维管理,促进电网运行向智能化AI人工智能一体化发展。智能电气及电力电子....
发表于 2020-05-08 14:58 43次阅读
AI人工智能在配电网应用

阿里安全研究发布AI安全诊断大师,对恶意攻击进行...

如同一些出生免疫力就有缺陷的人一样,AI也存在免疫力缺陷。基于从源头打造安全免疫力的新一代安全架构理....
发表于 2020-05-08 14:19 92次阅读
阿里安全研究发布AI安全诊断大师,对恶意攻击进行...

MATLAB新版问市,将为科学家提供更多的AI功...

MathWorks推出了R2020a 版本,扩展了深度学习方面的 AI 功能。
发表于 2020-05-08 08:48 22次阅读
MATLAB新版问市,将为科学家提供更多的AI功...

麻省理工学院提出更环保的AI训练方式,可降低碳排...

去年美国马萨诸塞州大学阿默斯特分校的研究人员曾表示,训练一台大型AI机器产生的碳,平均是一个人终其一....
发表于 2020-05-07 23:15 335次阅读
麻省理工学院提出更环保的AI训练方式,可降低碳排...

Granulate筹集1200万美元用于通过AI...

一家开发实时优化计算基础设施平台的初创公司Granulate今天宣布筹集了1200万美元,迄今为止的....
发表于 2020-05-07 22:53 182次阅读
Granulate筹集1200万美元用于通过AI...

Google的AI教会机器人学会了新的技能

谷歌和加州大学伯克利分校的研究人员在本周在预印本服务器Arxiv.org上发表的两篇论文中描述了新的....
发表于 2020-05-07 22:37 229次阅读
Google的AI教会机器人学会了新的技能

2019年中国AI服务器市场份额占比再次超50%...

近日,IDC公布了《2019年中国AI基础架构市场调查报告》。报告显示,2019年中国AI服务器市场....
发表于 2020-05-07 18:03 288次阅读
2019年中国AI服务器市场份额占比再次超50%...

Python到底是什么?

关于这么热门的AI呢,学习起来也不是你想象中的那么复杂的,其实掌握一个技能就能入门了,那就是:Pyt....
发表于 2020-05-07 14:46 631次阅读
Python到底是什么?

华为云EI医疗智能体快速构建新冠AI科研知识图谱

近期,华为云EI医疗智能体(EIHealth)采用自研医学领域AI模型和知识图谱技术,从公开发表的新....
发表于 2020-05-07 14:10 200次阅读
华为云EI医疗智能体快速构建新冠AI科研知识图谱

智原SoCreative!V™ SoC开发平台加...

智原SoCreative!VTM整合了DDR4、USB 3.0、PCIe Gen3与Gigabit以....
发表于 2020-05-07 10:23 30次阅读
智原SoCreative!V™ SoC开发平台加...

燧原科技宣布完成B轮融资7亿元人民币 将继续第二...

作为国内第一家以高端人工智能训练产品切入数据中心市场的初创公司,燧原科技去年12月发布了基于“邃思”....
发表于 2020-05-07 09:52 176次阅读
燧原科技宣布完成B轮融资7亿元人民币 将继续第二...

注意力机制或将是未来机器学习的核心要素

目前注意力机制已是深度学习里的大杀器,无论是图像处理、语音识别还是自然语言处理的各种不同类型的任务中....
发表于 2020-05-07 09:37 44次阅读
注意力机制或将是未来机器学习的核心要素

互联网周刊发布2019年度人工智能案例百强榜单

目前,智客系统已经在日本、中国多家零售店成功落地。其中,日本某零售商店通过智客系统进行店铺客流分析,....
发表于 2020-05-07 09:21 141次阅读
互联网周刊发布2019年度人工智能案例百强榜单

Ascbot,助力AI开发者们加速创新产品落地

2019年9月,创思远达在华为全联接大会上面向全球发布了基于Atlas200 DK的智能机器人开发平....
发表于 2020-05-07 09:07 572次阅读
Ascbot,助力AI开发者们加速创新产品落地

贸泽备货Microchip Hello FPGA...

FPGA主板搭载了Microchip PIC32MX7微控制器 ,用于控制SmartFusion2 ....
发表于 2020-05-07 08:48 93次阅读
贸泽备货Microchip Hello FPGA...

OpenAI推出Jukebox机器学习框架,可自...

近日,由诸多硅谷大亨联合建立的人工智能非营利组织OpenAI,推出了一款可自动生成音乐的机器学习框架....
发表于 2020-05-07 08:41 67次阅读
OpenAI推出Jukebox机器学习框架,可自...

MathWorks推出R2020a版本 为工程师...

GPU Coder 现在提供了一组更广泛的网络,以便在云和边缘设备上实现 AI 系统,这些网络包括 ....
发表于 2020-05-06 19:17 87次阅读
MathWorks推出R2020a版本 为工程师...

新的智能软件可以为下一代无人机提供强大动力

下一代无人机可以由人工智能软件提供动力,这些软件的灵感来自于蜜蜂如何适应并驾驭其周围环境,那是因为谢....
发表于 2020-05-06 16:31 345次阅读
新的智能软件可以为下一代无人机提供强大动力

研究发现AI可实时测量血液流量和预测心脏病发作

一项新的研究表明,由美国国立卫生研究院(National Institutes of Health)....
发表于 2020-05-06 16:26 213次阅读
研究发现AI可实时测量血液流量和预测心脏病发作

在未来的临床医学领域中将会更多地使用AI技术

关于放射学家对人工智能的观点已有很多文献报道,但是关于患者如何看待这种新兴技术在专业领域中的作用却很....
发表于 2020-05-06 16:19 403次阅读
在未来的临床医学领域中将会更多地使用AI技术

物联网与AI的融合将会为我们带来更多的便利

管对AI和IoT的全面优化还相距遥远,但在解决问题和信息可以改善所有利益相关者成果的情况下,这两种技....
发表于 2020-05-06 16:07 325次阅读
物联网与AI的融合将会为我们带来更多的便利

Valyant AI通过扩展度量驱动功能以迎接A...

报价Valyant AI的被动式对话AI平台:根据客户要求动态更新数字显示板,以节省客户的时间,同时....
发表于 2020-05-06 16:07 441次阅读
Valyant AI通过扩展度量驱动功能以迎接A...

新的智能翻译工具可以揭示老鼠交流的秘密语言

是否曾经想知道动物在说什么?特拉华大学的神经科学家在解码一种特定动物发出的声音方面取得了巨大的飞跃,....
发表于 2020-05-06 16:03 262次阅读
新的智能翻译工具可以揭示老鼠交流的秘密语言

Signal AI推出新功能,可对内容进行聚类和...

Signal AI在其声明中说,已经推出了下一代技术AIQ,该技术为其媒体监控和市场情报平台提供支持....
发表于 2020-05-06 15:59 345次阅读
Signal AI推出新功能,可对内容进行聚类和...

粤港澳大湾区各城市新材料产业布局情况

首先是创新要素。粤港澳三地科技研发、转化能力突出,拥有一批在全国乃至全球具有重要影响力的高校、科研院....
发表于 2020-05-06 15:03 454次阅读
粤港澳大湾区各城市新材料产业布局情况

通过人工智能技术来提高物联网的应用价值

尽管当今使用的IoT设备可以将数据发送到要分析的云中,这本身就令人印象深刻,但AI功能的实施可以从该....
发表于 2020-05-06 10:05 354次阅读
通过人工智能技术来提高物联网的应用价值

Avigilon新推出具有AI功能的H5M室外半...

芝加哥—摩托罗拉解决方案公司(纽约证券交易所:MSI)宣布推出其视频安全产品组合中的最新产品,即Av....
发表于 2020-04-30 18:00 973次阅读
Avigilon新推出具有AI功能的H5M室外半...

人工智能将会改变未来品牌发展创意的方式

在广告的大部分历史中,广告商主要根据其创意团队的直觉来制作消息。当然,我们一直进行调查和市场研究,以....
发表于 2020-04-30 17:54 1408次阅读
人工智能将会改变未来品牌发展创意的方式

关于机器学习和AI解决气候变化的广泛应用

人工智能专家首次创造了一个在气候问题上进行协作的场所,即“气候变化AI”。
发表于 2020-04-30 17:53 166次阅读
关于机器学习和AI解决气候变化的广泛应用

零售商可以利用AI来解锁并充分利用其数据宝库

数据是润滑诸如Amazon.com之类的大型在线零售商的销售机器的油,并且正在探索Google和Fa....
发表于 2020-04-30 17:42 954次阅读
零售商可以利用AI来解锁并充分利用其数据宝库

用AI对珊瑚礁的恢复能力进行监测、描述和分析

“人工智能为我们提供了前所未有的机会来帮助解决一些最具挑战的社会问题,我们 ‘AI科技向善’(AI ....
发表于 2020-04-30 17:03 902次阅读
用AI对珊瑚礁的恢复能力进行监测、描述和分析

AI能为地球的可持续发展,带来怎样的新意?

近期,英特尔“人工智能构建者计划(Intel AI Builder)”成员、数据科学公司Gramen....
发表于 2020-04-30 17:01 630次阅读
AI能为地球的可持续发展,带来怎样的新意?

AI数据之于智能家居落地,云测数据助力行业航向成...

就像本文开篇所说,我们对人工智能的探索就是一次征服汪洋大海的过程。从上世纪中期人工智能起步,到如今探....
发表于 2020-04-30 16:52 412次阅读
AI数据之于智能家居落地,云测数据助力行业航向成...

AI设计3D打印制造,实际效果非同一般

瑞士创新型滑雪板公司NOW联手巴塞罗那的人工智能设计工作室ADDIT·ION,利用AI设计原型、3D....
发表于 2020-04-30 16:46 563次阅读
AI设计3D打印制造,实际效果非同一般

联合探索5G赋能智慧油井,打造5G+云+AI数字...

胜利油田隶属于中石化集团,是我国重要的石油工业基地,工作区域主要分布在山东省的东营、滨州、德州、济南....
发表于 2020-04-30 15:38 341次阅读
联合探索5G赋能智慧油井,打造5G+云+AI数字...

2020 研电赛设“抗击疫情”奖,Xilinx ...

赛灵思与中国学术界的合作由来已久。2006 年起,赛灵思不断扩大服务于中国学术界的本土团队,并先后开....
发表于 2020-04-30 15:13 370次阅读
2020 研电赛设“抗击疫情”奖,Xilinx ...

快讯:Dialog推出SmartBond TIN...

近日,乐鑫信息科技发布 AI 语音麦克风阵列开发板 ESP32-Korvo。这是一款针对物联网嵌入式....
发表于 2020-04-30 14:47 1336次阅读
快讯:Dialog推出SmartBond TIN...

真格早期项目「快兔物流」完成B轮融资

近日,快兔物流完成由众为资本领投、碧桂园创投 VC 基金参与投资的 B 轮融资,奥拓投资和创新工场等....
发表于 2020-04-30 14:28 318次阅读
真格早期项目「快兔物流」完成B轮融资

美光的先进内存和存储技术支持成为关键

如果你进入一个完全自动化的单独分销点,你会有四种无任何关系的不同产品。它或许是一块 DRAM dim....
发表于 2020-04-30 10:50 347次阅读
美光的先进内存和存储技术支持成为关键

如何利用人工智能技术来发现并设计药物

在具有里程碑意义的发展中,使用人工智能(AI)创建的第一种药物已进入其第一阶段试验。
发表于 2020-04-30 10:34 269次阅读
如何利用人工智能技术来发现并设计药物

智能机器人将会是未来医疗行业发展的关键

掌握科技,才能赢得未来,世界各国深谙其理。在人工智能高速发展的大环境下,医疗行业的智能化升级成为各国....
发表于 2020-04-30 10:18 427次阅读
智能机器人将会是未来医疗行业发展的关键

未来求职迎来新变化,人工智能来当面试官

如果您正在寻找新工作,那么招聘过程就会发生新的变化,这种变化越来越普遍:被人工智能判断。
发表于 2020-04-29 22:26 481次阅读
未来求职迎来新变化,人工智能来当面试官

通过智能分析的数据将会为我们带来巨大的经济效益

SDAIA任务授权的战略重要性体现在沙特阿拉伯领导人对沙特阿拉伯在建立沙特阿拉伯成为全球数据驱动经济....
发表于 2020-04-29 22:19 492次阅读
通过智能分析的数据将会为我们带来巨大的经济效益

谷歌的DeepMind通过AI帮助科学家了解冠状...

谷歌的DeepMind正在将其人工智能系统置于一项新的任务:试图弄清这种新型冠状病毒的某些特性,这种....
发表于 2020-04-29 22:19 614次阅读
谷歌的DeepMind通过AI帮助科学家了解冠状...

基于AI的评估系统对我们会有什么样的益处

在办公室,评估往往是敏感和有争议的问题,在办公室,评估有一系列问题和疑问,而在人力资源部门则有答案和....
发表于 2020-04-29 17:59 546次阅读
基于AI的评估系统对我们会有什么样的益处

通过AI来揭示黑白癌症患者之间的细胞变异

在最近的一项研究中,研究小组表明,对癌症组织数字化图像的AI分析显示,黑白男性前列腺癌患者之间存在严....
发表于 2020-04-29 17:56 473次阅读
通过AI来揭示黑白癌症患者之间的细胞变异

Facebook AI的算法可以改善自动驾驶汽车...

Facebook AI研究人员的一个团队最近开发了一种算法,即“其他游戏(OP)”,该算法构建的策略....
发表于 2020-04-29 17:52 543次阅读
Facebook AI的算法可以改善自动驾驶汽车...

研究人员开发一种AI工具,可加快冠状病毒的分析速...

技术进步加快了科学家治疗疾病爆发的时间表。当他们争夺冠状病毒治疗时,他们正在使用邮购DNA,合成病毒....
发表于 2020-04-29 17:47 615次阅读
研究人员开发一种AI工具,可加快冠状病毒的分析速...

Bridge Biotherapeutics与A...

根据协议,Atomwise将使用其AI技术和同源性建模功能来评估Pellino E3泛素连接酶及其与....
发表于 2020-04-29 17:36 559次阅读
Bridge Biotherapeutics与A...

机器学习与人工智能有助于改善安全检测系统

欺骗技术不是一个新概念。包括Illusive Networks和Attivo在内的公司已经在该领域工....
发表于 2020-04-29 17:32 230次阅读
机器学习与人工智能有助于改善安全检测系统

研究人员通过AI和机器人来治疗手部震颤疾病

研究人员开发了一种机器学习模型,该模型可以使机器人安全地治疗与神经退行性疾病相关的手部震颤。
发表于 2020-04-29 17:29 272次阅读
研究人员通过AI和机器人来治疗手部震颤疾病

人工智能为糖尿病的治疗发展铺平了道路

许多1型糖尿病患者一样,莫琳·麦金恩(Maureen McGinn)以前如果错过一餐或去计划外散步时....
发表于 2020-04-29 17:12 804次阅读
人工智能为糖尿病的治疗发展铺平了道路

RPA与人工智能的相连

RPA与人工智能
发表于 2020-04-13 09:23 91次阅读
RPA与人工智能的相连

【战疫专题】第五期:智慧物流,疫情之中显担当

2020年,新型冠状病毒席卷了整个中国,同时也在促进着产业的变革与生活变化。 电子发烧友在此期间推出【战疫专题】活...
发表于 2020-03-18 11:00 3185次阅读
【战疫专题】第五期:智慧物流,疫情之中显担当

人工智能、数据挖掘、机器学习和深度学习的关系

人工智能、数据挖掘、机器学习和深度学习之间,主要有什么关系?...
发表于 2020-03-16 11:35 190次阅读
人工智能、数据挖掘、机器学习和深度学习的关系

人工智能侦查有哪些应用

【人工智能侦查的应用领域】
发表于 2020-03-16 11:28 157次阅读
人工智能侦查有哪些应用

人工智能+边缘计算!米尔NXP工业级物联网板卡8M mini资料分享

响应行业应用和满足客户需求,米尔推出了基于NXP公司i.MX 8M Mini系列芯片的MYC-C8MMX系列核心板及开发...
发表于 2020-03-06 11:44 764次阅读
人工智能+边缘计算!米尔NXP工业级物联网板卡8M mini资料分享

红外传感+人工智能,智能机器人红外发送接收电路解析

该移动音乐机器人以英飞凌16 位单片机XE162FN 处理器为核心,英飞凌开发的16/32 位微控制器具有高度系统集成、无需...
发表于 2020-02-28 07:00 645次阅读
红外传感+人工智能,智能机器人红外发送接收电路解析

【战疫专题】第二期:硬核战“疫”,机器人大有可为

2020年,新型冠状病毒席卷了整个中国,同时也在促进着产业的变革与生活变化。 电子发烧友在此期间推出【战疫专题】活...
发表于 2020-02-25 14:24 6173次阅读
【战疫专题】第二期:硬核战“疫”,机器人大有可为

【瑞芯微RK1808计算棒试用体验】机械臂视觉快速识别

折腾了一个新年,总算勉强有点效果了,这个任务真是大坑啊,关键的识别部分没多大难度,但上位机、下位机、机械结构接...
发表于 2020-02-08 18:13 732次阅读
【瑞芯微RK1808计算棒试用体验】机械臂视觉快速识别

2020艾睿电子解决方案展示会

活动简介 艾睿电子解决方案展示会是艾睿电子自主主办的展会,也是每年一度的 ACT (Arrow Centralized Training...
发表于 2020-01-15 09:40 39219次阅读
2020艾睿电子解决方案展示会

内置NPU的Orange Pi 4B,你怎么看

提起单板电脑,树莓派基金会发布的树莓派系列开发板或许是最广为人知的,该公司坚持使用博通的SOC芯片,以实现不断...
发表于 2019-12-23 21:07 1242次阅读
内置NPU的Orange Pi 4B,你怎么看
博评网