Bug探索质量相关问题解答
1、如何保证客户产品的保密性和安全性？
我们平台的每个参与测试的测试者，都与平台签署了保密协议，并提供了其真实身份信息，包括身份证号、手机号等。高保密的项目，我们还会和参与测试的每个测试者签订纸质的保密协议。
2、你们怎么来确保能够很好的理解我们的产品
首先，我们挑选的测试专家都是具备相关行业经验的自身测试专家，理解您的产品会非常快。如银行类的测试，我们会安排由专门测试银行产品的专家进行对接。
其次，测试专家会在测试前和客户就产品进行深度地沟通，并提出针对产品的功能点分析、测试计划、测试方案，直到客户认可我们的测试计划和方案后，才开始进行Bug探索测试。
再次，在测试过程中，专家会随时就一部分交上来的Bug和客户进行沟通确认，保证对产品的理解与客户期望一致。
3、如何保证测试者的质量？
平台有多层考核机制来保证测试者质量，测试者首先需要经过专业的测试能力考试，才具备参与测试任务的资格，测试者只有在真实测试任务重表现出突出的测试能力，才能成为平台合格测试者。每次测试任务，测试者的测试结果都会被评分考核，类似滴滴对司机的打分，评分低的测试者会被淘汰，只有评分高，测试能力强的测试者才能在平台中进行测试任务。
4、怎么确保测试结果？
首先，保证测试者的质量，通过严格的测试者筛选，能力考核，保证执行测试的测试者都是合格测试者，从中挑选的测试专家，更是经过视频认证和真实任务中验证过来的。
其次，测试过程中，众测制定了大量的测试规范和流程保证测试结果，测试开始前，测试专家需要提供详尽的测试计划，并进行功能点确认，众测有大量的PM（项目经理）进行过程管理，对交付的测试结果进行实时审查。
再次，每次测试我们都会对测试者进行评估和考核，评分低的测试者将直接失去测试资格。
经过5年的积累，众测平台上已经沉淀大量各行各业高评分的专业测试者。
5、 Bug探索找不出bug怎么办?
Bug探索肯定能找出Bug，我们已经做过几万次测试，目前没有碰到Bug探索找不出Bug的情况。即使是有Bug比较少的情况，也是因为客户的App经过众测专业的定期测试，及时修复app存在的bug后，成长为比较成熟稳定的app。
6、大概测出的Bug数有多少？
这个根据您App的情况而定，如果是刚开发出来的App，版本不稳定会导致Bug的数量比较多；如果是运行了一段时间，版本比较稳定，Bug的数量会相对较少；也有可能因为测试范围的调整，Bug的数量增加或减少。
7、怎么评判Bug的等级？
从专家角度出发会对探索出来的Bug作如下分级：
致命：程序无法正常运行或程序无法跑通-无法正常启动、异常退出、crash、资源不足、死循环、崩溃或严重资源不足等
严重：核心功能无法完成、功能报错、数据错误等，但不会影响程序运行
缺陷：一般功能性Bug，产品中的不符合产品需求或用户使用的缺陷
瑕疵：操作不方便，布局不合理等一类的易用性相关的缺陷
建议：对产品的改进优化型建议
Bug探索发现的致命级和严重级缺陷，存活率 = 0%；
Bug探索发现的缺陷级、瑕疵级和建议级问题，存活率根据App阶段待定。
客户拿到报告后，会根据自己的开发需求和产品属性对Bug进行置评：
非常有用、有用、一般、没什么用、不是Bug
专家对Bug的分级会影响测试者的酬劳，而专家也会根据客户对Bug的置评进一步了解客户的测试需求，在下一次测试中更有针对性地进行测试。
8、对Bug的评审
在测试者提交了Bug以后，专家会先对bug进行第一次筛选，把一些质量不高或是重复的bug剔掉，优化结果质量。
之后Testin众测的质量PM会对专家审核过后的bug进行再一次的审核，从资深测试从业者的角度全面为Bug探索的报告进行把关，保证呈现给客户的报告是高质量的测试结果。
Bug探索效率相关问题解答
1、Bug探索测试有多少人执行？
一般Bug探索项目，我们会用15个专业测试人员进行探索，对于功能复杂或有特殊场景需求的项目，我们可以将团队扩大到50人、甚至100人。
2、Bug探索测试多长时间交付？
Bug探索交付时长为24小时。根据测试强度和客户需求会作稍微调整。
3、Bug探索中每个测试者大概测多久？
一般每个测试者会测试4小时左右，整个Bug探索报告交付的时间是24小时。
4、如何保障Bug探索测试前期的沟通效率？
对于具有专业测试经理的客户：Bug探索前，需要客户首先将需求文档尽可能详尽的提供给我们的测试专家，测试专家会一边学习需求文档，一边使用客户的产品，并与客户进行产品的功能点沟通和测试重点需求确认。测试专家会根据自己理解进行功能点分析，并撰写测试计划交由客户确认，客户确认后，才开始进行Bug探索测试。
对于没有专业测试经理的客户：Bug探索前，需要众测专职项目经理PM了解客户产品需求，定制测试策略后，告知测试专家，双方确认完毕后，才开始bug探索测试。
而且在测试过程中，专家也会跟进沟通，保证需求理解和测试方向的正确性。
5、Bug探索标准流程是怎么样的？
专家确认客户的测试需求后，围绕需求，开始撰写测试计划的工作，测试计划包含了对客户应用的模块解析划分、测试重点说明及时间排期等内容。在PM和客户确认测试计划后，专家家筛选参与的测试者，按照需求开始测试工作。
在执行期间，专家审核测试者所提交的Bug是否符合规范，是否符合平台的质量要求。专家完成测试结果的审核后，质量PM会介入查看测试结果予以把控风险，将审核过多报告整体交付给客户验收。
Related Articles
用例测试Q&A-质量、效率相关
用例测试质量相关问题解答 1、如何保证客户产品的保密性和安全性？ 我们平台的每个参与测试的测试者，都与平台签署了保密协议，并提供了其真实身份信息，包括身份证号、手机号等。高保密的项目，我们还会和参与测试的每个测试者签订纸质的保密协议。 2、你们怎么来确保能够很好的理解我们的产品 首先，我们挑选的测试专家都是具备相关行业经验的自身测试专家，理解您的产品会非常快。如银行类的测试，我们会安排由专门测试银行产品的专家进行对接。 ...
Bug探索Q&A -价值、流程相关
Bug探索的价值相关问题解答 1、我们有测试团队，找你们做Bug探索的价值是什么？ 已有测试团队的，Testin众测可以很好的进行补充： 在测试工期要求紧的时候，提供测试力量的补充（如对新功能进行复查测试等） 突破原有测试团队的惯性思维，提供探索性的Bug探索来进行上线前的检查；从用户角度出发，找到更符合用户真实使用场景的Bug 增加测试团队不具备的测试能力，如金融、游戏App测试、疑难问题复现等等 2、为什么有了用例还要买bug探索？ ...
用例测试Q&A-价值、流程相关
用例测试的价值相关问题解答 1、我们有测试团队，你们的价值是什么？ 已有测试团队的，Testin众测可以很好的进行补充： 可以帮助团队完善用例库（很多测试团队可能没有时间编写完整的测试用例） 在测试工期要求紧的时候，提供测试力量的补充（如进行已有功能用例的遍历；对新功能进行复查测试等） 突破原有测试团队的惯性思维，提供探索性的Bug探索来进行上线前的检查 增加测试团队不具备的测试能力，如性能测试、安全测试、疑难问题复现等等 2、为什么有了用例还要买bug探索？ ...
测试大咖秀第四期丨2017～2018行业功能性测试白皮书
本期直播主题： 2017～2018行业功能性测试白皮书 特邀嘉宾： 王品清，云测学院院长、资深测试专家 直播内容： 1）行业App功能模块质量情况 2）行业App功能模块主要问题 3）行业App功能性测试现状 直播回放： 《测试大咖秀》直播活动参与方式： 微信扫描下方二维码关注“Testin”公众号，直播活动会第一时间通知大家
体验测试FAQ
1.体验测试是多少人执行多长时间？ 现在是20人，50人，100人各档，当然成本不同，一般来说他们是执行15分钟，再去答题。 2.调查问卷是谁写？ 有客户自己编写，我们可以提供样例参考。 3.题目个数及形式有要求吗？ 仅限于单选、多选及问答三种形式，建议题目个数在20个左右，因为个数越多，可能测试者答的质量会有所下降。 4.可以指定人群吗？比如说小白用户？ 不支持指定人群，指定越细成本越高，如果有特殊想指定，可以选择可用性测试。