测试创新——大数据技术方案评审

最新推荐文章于 2024-05-22 20:19:01 发布
最新推荐文章于 2024-05-22 20:19:01 发布
阅读量590 收藏
点赞数
分类专栏： 测试技术创新 测试架构师 QA的公开课 文章标签： 技术方案
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huazhongkejidaxuezpp/article/details/124677384
版权
本文介绍了在大数据技术方案评审中需要遵循的七个关键原则，包括T-1统计指标计算、第三方数据源依赖、数据量级考量、数据质量检测、技术与业务需求匹配、可扩展性评估以及可测性问题。通过案例分析，提出QA建议，以提前规避性能、数据质量问题和业务风险。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目录

原则1： T-1范围内的统计指标统计，提前规避潜在的性能问题

原则2： 严重依赖第三方数据源的核心预估收入类数据，需要快速止血

原则3： 考虑存量数据量级，提前规避潜在边界/性能/处理速度/数据倾斜问题

原则4：评估数据质量检测，提前检测到异常数据并做异常处理

原则5：评估技术实现与业务需求的匹配度

原则6：评估技术实现可扩展性实现

原则7： 评估当前技术实现下是否存在可测性问题

大数据技术方案评审，提前规避问题：

原则1： T-1范围内的统计指标统计，提前规避潜在的性能问题

badCase: 技术方案评审时，实现计划为实时计算某些统计指标；
风险点：由于增量数据相对较大(几十万/天) ，实时查DB计算，可能会有性能风险、干扰其他指标查询RT；且T-1时间不必实时计算。
QA建议：T-1范围内指标，一次性、提前计算好

了解本专栏 订阅专栏 解锁全文 超级会员免费看
测试创新——引流测试实践浅谈
我的E家
07-11 627
无论讨论什么问题， 希望尽可能站在“上帝视角”，能比较全面的分析问题。 因而，这里会同时对 引流测试的 价值 、以及其局限性、使用前提进行探讨。 使用的不爽之处 极度不稳定(数据同步、状态变更) 无法任何业务自动化测试 链路调试投入大(需要详细了解下游依赖的底层数据表的关联关系， 故而，需要开发人员 协助) 自动化价值低，具体体现在： 1、效率提升方面：自动化维护 投入大， 产出仅仅原有回归；一旦业务实现变动，这是常态， 自动化必须重新调试 2、引流测试方法的 最大痛点。线上没有场景， ..
测试技术创新——测试技术架构设计
我的E家
07-14 910
业务/产品----技术架构 测试---------测试技术架构 “千手观音”测试时代 形式： 提供测试接口A: 可以实现xxx接口自动化测试 提供测试接口B: 可以实现某某数据的清理 重构的难题； 互为干扰； 测试平台化 大而全基础上，追求通用、稳定 测试服务化实现 核心目标： 测试服务追求小而美 开发同学： 技术方案评审； 后续，测试同学： 测试技术方案评审， 测试架构评审 测试架构师 测试团队的技术带头人，在系统非功能特性的测试、自动化测试框架等...
测试创新——测试有效性
我的E家
05-28 1452
目录 一、为什么需要验证测试的有效性？ 2、 测试有效性度量的方法有哪些？ 3、 变异测试 4、如何往代码注入变异 5、变异与业务 6、 总结 一、为什么需要验证测试的有效性？ 测试工作，从技术角度看，可以理解为是验证技术实现的有效性。 如果技术实现符合业务需求，则技术实现是有效的，否则技术实现是无效的，换句话说，就是通常意义上说的代码存在bug。 那么测试工作可以验证技术实现的有效性， 但是存在一种情况： 如果测试工作 有500+自动...
最新测试技术
博客
04-06 775
这些测试技术的发展和应用，不仅提高了软件测试的效率和质量，也使得软件测试更加智能化和自动化。随着技术的不断进步，我们可以预见未来软件测试领域将出现更多创新和变革。在软件测试领域，随着技术的不断进步和行业需求的变化，新的测试技术和方法不断涌现。
测试创新——拓宽自己的边界
我的E家
05-30 1084
目录 一、背景 二、测试人员的时间都花在了哪里 三、测试人员突破边界的几个方向 四、写在最后 一、背景 无论什么角色(开发、产品、测试、运营等等)，说起拓宽自己的边界，可能大多数理解都是：做自己本职工作外的事情；而且要自己本职工作的工作量不太多的情况下，因为大多数同学的工作日常就是：低效/重复的工作太多，累到吐血，忙的要死，哪有时间来做本职工作外的事情。 其实，拓宽自己的边界，自己的理解： 1、并非100%去做本职工作外的事情，一定是在...
车载电子电器架构 —— 基础技术开发概述
Soly_kun的博客
02-25 462
### 文章大体有如下内容： ### 1、基础技术开发概述 ### 2、基础技术开发 ### 3、小结
软件开发评审策略：5个案例分析——成功与失败的评审教训
[软件开发评审策略：5个案例分析——成功与失败的评审教训](https://img-blog.csdnimg.cn/24c3d7fd670c4e8fb18a9fd57ecbb487.png) 参考资源链接：[软件开发评审检查表大全]...
华为设计方案中的质量保证与测试流程：【技术标准】流程优化
![设计方案怎么写——华为]...此外，还探讨了华为测试流程的技术标准，并对质量保证和测试流程中的技术创新进行
【年度榜单】2020大数据产业创新服务产品丨数据猿·金猿榜
数据猿
01-20 2161
数据猿&金猿出品《2020数据猿年度金猿主题策划活动》之2020大数据产业创新服务产品榜丨“数据猿&金猿——金猿榜·金猿奖”年度巨献！大数据产业创新服务媒体——聚焦数据...
软件测试创新之路
zouhui1003it的专栏
08-28 3273
测试创新之路很多人认为创新必须是很大的点，。其实只要改善了事情，不管大小，大的可以叫大创新，小的可以叫微创新，都是创新。另外，创新也不一定是绝对意义上的“别人没做过”，只要是在当前的工作...
软件测试理念及其创新
07-07
软件测试概念、流程、管理方法、回归测试策略
测试创新——平台化产品思考
我的E家
11-02 1150
对于平台化有点不成熟的个人思考，我觉得平台至少分两种类型，能力型和辅助型。能力型是将一个功能从无法测试->能测试，这种平台解决的是能力而不是效率问题，case by case的去解，一定要点到为止，大而全也是为了解决实际需求的，不能搞不解决实际问题的空想。辅助型是指在不人为干预或者较少干预下，提升测试人员在整体流程上的效率，很多平台没有想好定位，搞几个页面上去还需要大量操作，除了满足自己技术情怀的私欲外毫无意义，对于一线测试来说不是提效而是负担。 什么是平台化？我的理解是： 工具本身的定位在.
【测试杂谈】测试前景展望：当前趋势、技术革新与未来发展潜力
最新发布
软件测试知识输出
05-22 1745
测试行业正面临着前所未有的发展机遇和挑战。作为测试人员，我们需要紧跟时代的步伐，不断提升自己的技能和素养，以应对未来测试行业的挑战和机遇。通过持续学习、跨领域知识融合、团队协作与沟通能力以及关注行业动态与趋势等策略，我们可以不断提升自己的测试能力和竞争力，为软件行业的健康发展贡献自己的力量。展望未来，随着技术的不断进步和市场的不断扩大，测试行业将迎来更加广阔的发展空间和更加美好的未来。让我们携手共进，共同迎接测试行业的挑战和机遇！
大数据架构师之路-性能评估
大数据训练营
03-02 7143
系统吞吐量（TPS）、用户并发量、性能测试概念和公式http://www.ha97.com/5095.html
测试技术创新——端到端自动化实现的几种方式
我的E家
07-11 1199
什么是端到端自动化实现 web前端/APP/小程序直接调用的服务端接口。 常见形式L:HTTP(S) 对于后端自动化来说， 是集成程度最高的自动化实现形式，也是最有bug发现价值的自动化实现形式 端到端自动化实现难点 接口的入参如何快速代码表达； 接口如何串联起来； 举例： http://xxx? 入参： json串 出参： json串 一个接口如何表达 对于每个接口而言： 1）拼接入参 2）执行 3）解析出参(供后续接口获取) 1、 fastjson 实现 入参、出..
技术创新——关于测试工具的一点感悟
我的E家
11-06 655
目录 一、什么是测试工具 二、测试工具的方向 三、测试工具的”不能“ 四、测试工具发挥最大功效 一、什么是测试工具 一切与测试有关的各种框架、平台、小工具等等，这里统一称为测试工具 二、测试工具的方向 可分为两类： 1、 效率型。主要是给人赋能，主要目标是提升工作效率。 比如 功能测试平台， 发布平台等等。 如果没有这种类型平台， 大不了线下人工操作好了， 大不了慢点，效率低点。 虽然进入了“作坊式”工作模式， 但毕竟工作还是可以做的。 2、能力型。主要是覆盖那些人为不易做的事情，主..
测试团队技术转型实践方法
Criss@陈磊
09-14 874
随着DevOps广泛落地，持续集成、持续交付和持续部署已经在各类团队中有了各自特色的实践方式，大大缩短了从需求提出到交付客户的时间周期。但是在高效的交付过程中，质量保证过程却变成了快速交付的掣肘。传统的手工测试已经无法满足快速交付的要求了，那么要解决耗时较长的手工测试和快速交付之间的矛盾，利用测试技术提升测试效率是目前最为有效的方法。这里面所说的测试技术包含了自动化测试、测试平台以及智能化测试，那么这些测试技术和测试团队又如何应用才能达到一个有效的提高质量效能的作用呢？
接口自动化测试的几个阶段
热门推荐
我的E家
10-15 1万+
根本目标 测试环境中，保证新增接口功能正确性，原有接口的回归（保证原有接口不被修改“坏”）； 生产环境中，保证接口层面服务可用，功能的正确性（保证服务挂掉时，及时发现） 接口自动化功能正确性保证(第一阶段) 该阶段主要是保证功能提供的正确性。所谓正确性，是指返回的数据正确，功能正确。  阶段特点：对接口进行最为详细的检查（接口返回json的正确性），QA对系统的熟悉程度和对接口的熟
中国大数据技术创新大赛及大数据分析的未来趋势
参赛者通常来自企业、高校和科研机构，他们围绕特定主题提交自己的作品，通过实战演练、技术交流和评审选拔等方式，推动大数据技术的前沿发展和深度应用。 描述部分对大数据（Big Data）的定义、特性和研究意义进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

多则惑少则明

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值