【QCon】精华内容上线92%,全面覆盖“人工智能+”的典型案例!>>> 了解详情
写点什么

Gremlin 发布面向混沌实验的应用级故障注入(ALF)平台

  • 2018-10-11
  • 本文字数:3101 字

    阅读完需:约 10 分钟

在旧金山举行的 ChaosConf 大会上,Gremlin 公司发布了其在“故障即服务”领域的第二款产品——应用级故障注入(ALFI)。最初的SaaS 产品旨在帮助工程师在基础设施级创建和运行混沌实验,在此基础上,ALFI 通过本地语言库支持实现了应用程序级的故障注入。目前,仅支持Java/JVM 平台,但很快就会加入其他语言库。

根据 Gremlin 的文档介绍,“操作者考虑请求”,除了希望针对基础设施层尝试注入故障外——如重启一个计算实例,增加网络连接延迟或消耗大量的内存——操作者也希望针对目标应用程序请求注入故障,例如,增加延迟或终止请求。

在将 ALFI 库作为依赖项集成到应用程序之后,工程师可以使用基于 Web 的 Gremlin UI 来运行“攻击”,针对 ALFI 依赖项报告的特定应用程序属性来匹配和限定故障注入的影响。工程师可以创建一个范围精确的破坏实验,例如,只影响特定的客户 ID、位置或设备类型。

选择通过 ALFI 进行故障注入的流量类型(图片来自 Gremlin 的博客

Gremlin 团队声称,由于 ALFI 嵌入到了应用程序中,因此,它可以在任何现有的环境中工作,其中也包括所有的无服务器平台,如 AWS Lambda、Azure Functions 和 Google Cloud Functions。Gremlin 认为,在使用微服务或函数即服务(FaaS)架构方式构建的系统中,许多事件的发生都是由于上游依赖项的某个地方出现了减速或故障。因此,ALFI 可以模拟特定服务、特定 RPC 调用和外部依赖的延迟或全面故障,使工程师可以重现中断,主动发现未知的故障模式,并为多个组件发生故障的更复杂的场景做好准备。

要使用 ALFI,工程师必须将 Gremlin 语言依赖项集成到应用程序中并重新部署。 JVM 安装指南针对当前支持的安装过程提供了一个详尽的步骤(目前只提供了一个 Gradle 依赖示例,很快就会提供一个 Maven 示例)。应用程序重新部署后,必须通过环境变量或属性文件配置一系列 ALFI 参数,比如 Gremlin 团队标识符和凭证

工程师操作的主要 Java 类是 com.gremlin.GremlinService,该类抽象了向 Gremlin SaaS 平台 API 注册、查找和缓存实验以及向 Gremlin API 报告成功所需要的所有功能。GremlinService 类被设计为单例,可以通过依赖注入框架进行管理。文档中提供了将故障注入集成到 Java Apache HTTP 客户端 Amazon DynamoDB NoSQL 数据库客户端的示例。还可以添加自定义扩展

ALFI 的一个重要概念是,每个应用程序都有一组标识属性。这组属性被称为 ApplicationCoordinates,用于确定应用程序何时通过基于 Web 的 UI 匹配攻击请求。gremlin-core 依赖包括在 AWS Lambda 和 Amazon EC2 上运行的集成。在 AWS Lambda 中,将默认设置属性“type=AwsLambda、name 和 region”。在 AWS EC2 中,将设置属性“type=AwsEc2、region、az、instanceId”,例如:

{"type"="AwsLambda", "region"="us-west-1", "name"="event-handler"} 和{"type"="MyServiceType", "region"="us-east-1", "service"="recommendations", "criticality"="2", "userfacing"="true"}。 通过在抽象类 GremlinCoordinatesProvider 中实现这两个方法,还可以定义操作者希望针对的应用程序的其他方面或“坐标”。要创建自定义 ApplicationCoordinates,工程师必须重写 initializeapplicationcoordinate() 方法。自动生成的 ApplicationCoordinates(如果有的话)作为这个方法的参数提供,这意味着,任何自定义的坐标都可以附加到里面。下面是一个自定义 ApplicationCoordinates 的示例:

复制代码
import com.gremlin.ApplicationCoordinates;
import com.gremlin.GremlinCoordinatesProvider;
 
public class MyCoordinatesProvider extends GremlinCoordinatesProvider {
 
@Override
public ApplicationCoordinates initializeApplicationCoordinates(Optional<ApplicationCoordinates> autoDiscoveredCoordinates) {
return autoDiscoveredCoordinates.map(c -> {
c.putField("userfacing", "true");
return c;
}).orElseGet(() -> new ApplicationCoordinates.Builder()
.withType("MyServiceType")
.withField("name", "recommendations")
.withField("userfacing", "true")
.build());
}
}
{1}

然后,可以使用这组 ApplicationCoordinates 来匹配攻击。例如,如果操作者创建了匹配 userfacing=true 的攻击,那么上面示例中列举的应用程序将包含在攻击中。目前,操作者可以指定应该受故障注入影响的请求的百分比,为请求添加延迟或在请求执行线程上导致一个被抛出的异常。

在故障注入领域,也有开源的解决方案,例如(现已退役的) Simian Army Chaos Toolkit ,但是,这些产品需要自托管。运行混沌实验确实需要提前准备和设计,最近有一篇长文“ ChaosConf 问答:混沌工程的好处、挑战和实践”对这些主题都有涉及。

要了解关于 Gremlin ALFI 的更多信息,请查看 ALFI 发布博文 ALFI 帮助页面

查看英文原文: Gremlin Release Application Level Fault Injection (ALFI) Platform for Targeted Chaos Experiments

2018-10-11 19:001966
用户头像

发布了 1008 篇内容, 共 372.2 次阅读, 收获喜欢 340 次。

关注

评论

发布
暂无评论
发现更多内容

写冲突场景下的悲观/乐观事务模型选择

TiDB 社区干货传送门

实践案例

TiDB at ZaloPay Infrastructure & Lesson Learned

TiDB 社区干货传送门

PD 分配 TS 的 QPS 上限揭密

TiDB 社区干货传送门

NewSQL 在微众银行核心批量场景的应用

TiDB 社区干货传送门

实践案例

【TiDB 最佳实践系列】乐观锁事务

TiDB 社区干货传送门

实践案例

AskTUG 论坛迁移实战:Discourse 从 PostgreSQL 到 MySQL 到 TiDB

TiDB 社区干货传送门

从内容角度看看TUG小伙伴都在关注些啥

TiDB 社区干货传送门

版本测评

TiDB 集群的可用性详解及 TiKV Label 规划

TiDB 社区干货传送门

TiDB 底层架构

TiKV 集群部署 注意事项

TiDB 社区干货传送门

TiDB 数据库开发规范

TiDB 社区干货传送门

常见问题排查之 -- DM 主键冲突的原因及排查思路

TiDB 社区干货传送门

tiup目录冲突检测不健全导致的节点被destroy问题以及解决

TiDB 社区干货传送门

如果你的 kubelet 运行在容器中,使用 local static provisioner 要注意一个问题

TiDB 社区干货传送门

基于阿里云ECS部署的TiDB 2.1.14升级到4.0.0-rc实践

TiDB 社区干货传送门

管理与运维 安装 & 部署

从抓包发现并解决 Navicat 编辑 TiDB 视图报错的问题

TiDB 社区干货传送门

实践案例 TiDB 底层架构

TIDB 3.0.5 性能压测

TiDB 社区干货传送门

数据库架构选型

某业务升级5.0解决慢SQL问题

TiDB 社区干货传送门

实践案例 故障排查/诊断

【TiDB 4.0 新 Feature 原理及实践】 Dashboard 触手体验

TiDB 社区干货传送门

TiDB 5.0 异步事务特性体验——基于X86和ARM混合部署架构

TiDB 社区干货传送门

移动云基于 TiDB 实现 serverless 数据库服务

TiDB 社区干货传送门

tidb开发规范

TiDB 社区干货传送门

【精选实践】TiDB 在马上消费金融核心账务系统归档及跑批业务下的实践

TiDB 社区干货传送门

实践案例

Flink + TiDB,体验实时数仓之美

TiDB 社区干货传送门

实践案例

【TiDB DevCon 2020】金融专题论坛演讲视频汇总

TiDB 社区干货传送门

招募体验官!构建实时数仓 - 当 TiDB 遇见 Pravega

TiDB 社区干货传送门

【技术专题】如何做数据库选型?

TiDB 社区干货传送门

实践案例

【TiDB 最佳实践系列】开发 Java 应用使用 TiDB 的最佳实践

TiDB 社区干货传送门

实践案例

SQL只是CRUD?

TiDB 社区干货传送门

TiDB 底层架构

日本大型移动支付软件 PayPay 的 TiDB 迁移实践

TiDB 社区干货传送门

几分钟读懂 TiDB HTAP

TiDB 社区干货传送门

【热门问题】关于近期签名过期的处理合集

TiDB 社区干货传送门

Gremlin发布面向混沌实验的应用级故障注入(ALF)平台_DevOps & 平台工程_Daniel Bryant_InfoQ精选文章