可靠性测试-故障注入工具

故障注入是一种模拟故障的技术，用于测试系统在各种异常情况下的反应和恢复能力。Chaos Blade 是阿里巴巴开源的混沌工程工具，用于在云原生环境中进行故障注入。它支持多种故障类型，包括主机、网络、应用和 Kubernetes 资源等。

本篇第一部分，我们手动执行故障注入，可以直接进行手动可靠性测试，后面再或通过python、java等将可靠性用例制自动化。

1. Chaos Blade下载，安装

wget https://github.com/chaosblade-io/chaosblade/releases/download/v1.0.0/chaosblade-1.0.0-linux-amd64.tar.gz

tar -zxvf chaosblade-1.0.0-linux-amd64.tar.gz

sudo mv blade /usr/local/bin/

# 验证安装

blade -h

2. 使用Chaos Blade手动注入故障

1. 主机级故障注入

# CPU 压力测试：模拟 CPU 高负载情况
blade create cpu fullload --cpu-percent 80 --timeout 60


# 内存压力测试：模拟内存高占用情况
blade create mem load --mem-percent 80 --timeout 60

# 磁盘 I/O 压力测试
blade create disk burn --read --path / --timeout 60

2. 网络级故障注入

# 在指定的网络接口上注入网络延迟
blade create network delay --interface eth0 --time 3000 --timeout 60

# 在指定的网络接口上注入网络丢包
blade create network loss --interface eth0 --percent 50 --timeout 60

# 在指定的网络接口上限制网络带宽
blade create network loss --interface eth0 --rate 1000kbit --timeout 60

3. k8s资源故障注入

# 随机删除一个 Pod
blade create k8s pod --namespace default --labels app=myapp --timeout 60

# 对 Pod 网络注入延迟
blade create k8s network delay --namespace default --labels app=myapp --interface eth0 --time 3000 --timeout 60

4. 故障状态查看、故障取消

blade status

blade destroy <experiment-id>

5. 通过yaml方法进行故障注入：安装 Chaos Blade Operator，这样可以通过 YAML 文件来管理故障注入实验。