混沌测试是一种技术,用于通过引入意外故障或中断来测试软件系统的弹性。 混沌测试也称为混沌工程。 混沌测试的目标是识别弱点并提高应用的复原能力。
混沌测试基于这样一种理念,即 系统以意想不到的方式失败。 传统的测试方法往往无法发现这些意外的故障模式。 当您使用混沌测试时,您可以模拟真实场景,例如服务器崩溃、网络延迟或资源耗尽。 模拟这些行为有助于揭示在正常测试条件下可能不明显的隐藏问题和弱点。
以下是关于混沌测试需要记住的一些要点:
- 积极主动。 混沌测试不是等待故障发生,而是主动引入故障以查看系统如何响应。 通过混沌测试,可以在问题成为主要问题之前识别和修复问题。
- 获得洞察。 混沌测试的目标是从失败中学习。 通过引入它们,你可以深入了解系统在压力下的行为方式,并使用这些信息来改进它。
- 促进团队协作。 混沌测试在协作进行时最有效。 您需要开发人员、测试人员、运营人员和其他利益相关者的意见。 通过合作,您可以确定要测试的最重要的领域,并确保每个人都了解情况。
- 从小处着手,然后逐步积累。 当您第一次开始使用混沌测试时,最好从小处着手,然后逐渐增加测试的复杂性。 从小型开始有助于建立信心,并更好地了解系统在不同条件下的行为方式。
总之,混沌测试是一种功能强大的技术,可帮助你提高应用的复原能力。 通过主动引入故障并从中学习,可以在问题成为主要问题之前识别和解决问题。
针对应用调用的 API 的混沌测试
混沌测试通常侧重于基础结构:服务器、网络和容器。 如果你的应用依赖于 API,则用户注意到的一些故障来自这些 API:例如,支付服务提供商返回的 500、GitHub 或 OpenAI 返回的 429,或者响应耗时 8 秒而不是 80 毫秒。 你也可以在单个 API 响应级别将相同的混沌测试想法应用到这些依赖项上:
- 错误。 随机返回
5xx错误,并检查应用是否会重试可安全重试的操作,并为其余情况显示有用的消息。 - 遏制。 返回
429,并带有Retry-After标头,然后检查应用是否在再次调用之前等待。 - 延迟。 延迟响应,并检查超时、加载指示器以及响应乱序到达时会发生什么情况。
| Approach | 你找到的内容 | 您错过的内容 |
|---|---|---|
| 等到投入生产 | 真实故障 | 所有情况,直到用户遇到它 |
| 在测试中模拟 API,或让编码代理编写模拟对象 | 错误分支是否运行 | API 的实际故障格式、SDK 的重试策略以及正在运行的应用的行为方式。 你的应用还需要一个仅用于测试的开关来访问模拟。 |
| 破坏真实的基础设施(例如,终止服务或阻止网络流量) | 系统如何应对中断 | API 层级失败,例如特定错误代码或 Retry-After 标头 |
| 截获应用的实际流量并注入 API 故障 | 真实 URL 上以你选择的速率出现的错误、限流和延迟 | 基础设施故障。 对这些情况使用基础结构混沌工具。 |
在你的应用中试用它
Dev Proxy在你的应用继续调用真实 URL 的同时,向其中引入 API 故障。 它适用于任何技术堆栈上的任何类型的应用,而无需更改代码。 例如,若要让发往 API 的一半请求随机失败,请参阅 使用随机错误测试我的应用;若要让这些请求变慢,请参阅 模拟缓慢的 API 响应。 若要在 CI 管道中运行相同的测试,请参阅 在 CI/CD 中使用 Dev Proxy。