10 月,开发者不可错过的开源大数据大会-2021 WeDataSphere 社区大会深圳站 了解详情
写点什么

敏捷与结构性模块化(一)

2013 年 11 月 25 日

1 简介

敏捷开发方法论日益流行,然而大多数“敏捷”专家和分析师都在孤立地讨论敏捷,也就是说忽视了系统“结构”(Kirk Knoernschild 是一个例外,他编写了一本名为《Java Application Architecture》的图书阐述这一理念)。考虑到“敏捷”是基础实体的一个重要特性或属性,那么,这种疏忽令人感到很惊讶。一个实体要具有“敏捷”的特性,它必须具有高度的结构性模块化(structural modularity)特征(参见 Scott Page 的《Diversity & Complexity》)。

也许正因为这种疏忽,许多组织在敏捷开发流程方面进行投入但忽略了应用程序的结构。除了“如何实现一个敏捷的系统?”这个问题以外, 有人肯定还会问, “如何构建一个在结构上具备高度模块化的系统?”

这个系列的文章将从探讨结构性模块化和敏捷之间的关系开始。

2 结构、模块化与敏捷

业务主管和应用开发人员经常面临相同的挑战。无论是商业领域还是服务于商业的软件,它都必须在成本范围内构建和维护。如果要保持实体的持续运营,就必须能够以低成本的方式快速响应难以预料的变化。

如果我们希望高效地管理一个系统,就必须先理解该系统。只有理解了系统,可控制的变更和定向升级才能成为可能。

当然,我们并不需要理解系统的每个组成部分的详细情况和特性,只需要理解所负责的系统的相关参数以及相应等级层次的行为即可。

隐藏服务实现

从外部角度来看,我们仅仅关心系统暴露的行为、提供的服务类型以及该服务的属性。例如,服务可靠吗?与替代方案相比有竞争力吗?

图 1:服务的使用者 作为服务的使用者,我们并不关心服务的特性是如何实现的,我们只关心所提供的功能(Capability)是否可以满足我们的需求(Requirement)。

理解结构以便管理

不同于使用者,服务的实现方式对于服务的提供者而言,是极为重要的。为了更好的理解,我们为负责提供服务的系统建立概念模型,这是通过将系统分解成一组更小的相互关联的单元实现的。如果这个实体是某个公司,这张组件图就代表了“组织结构图(Organization Chart’)”;如果这个实体是软件应用程序,那么这张图就是模块间依赖关系的映射图。

尝试理解抽象系统的第一步如下图所示。

图 2: 服务提供者和系统维护者

从上图的例子,我们可以马上知道:

  1. 系统由 15 个组件组成。
  2. 每个组件的名称。
  3. 这些模块间的依赖,尽管我们无法知道这些依赖为何存在。
  4. 尽管我们并不知道每个组件各自所承担的责任,从关联性出发,我们依然可以推断出“Tom”模块在系统中所占据的地位很有可能比“Dick”模块更为重要。

需要注意的是,这些组件可能并不是我们所创建的,我们也不必理解这些组件之间的内在结构。就像作为服务的使用者,只需关心服务所提供的功能,我们作为组件的使用者,只是需要它们的功能。

需求和功能(Requirements & Capabilities)

到目前为止,我们仅仅知道组件之间存在依赖性,并不知道为什么会存在这些依赖性。另外目前的状态是与时间无关的。如果随着时间的推移,发生了变化又该怎样呢?

最初我们可能会借助于实体的名字,再加上版本号(version)或者版本范围(version range),结构的变化由版本的变化体现出来。然而,如图 3 所示,版本名称(versioned name)尽管表明了系统的改变,但却无法解释为什么 Susan 2.0 不能像 Susan 1.0 那样与 Tom 2.1 一起协同工作。

这是为什么呢?

图 3:如何跟踪结构随时间的变化?系统以前能够正确运行,后来由于一个组件的升级导致整个系统出错。为什么呢?

只有当我们仔细研究系统的功能和需求后,才能了解问题的原因。Tom 2.1 需要管理者(Manager)的功能,这个功能在 Susan 1.0 中提供。然而稍后的 Susan 2.0,由于她的职业规划,决定进行再培训,这时的 Susan 2.0 被赋予了新的 Plumber 1.0 功能,也就意味着其不再拥有管理者的功能了。

这个简单的例子向我们展示了模块间的依赖关系需要由需求和功能来表达,而不是它们的名字(Apache Maven 项目最近正在讨论为制件的名字采用版本范围。尽管这是一个进步,但依然有缺陷,因为依赖还是用实体的名字来进行描述。)。这些描述应当能显示模块的本质,即模块应当能自我描述(需求、功能以及依赖应该进行文档化,但是随着时间的推移,这些描述会变得过时,如最初的文档制定之后,系统又发生了变化,而文档并没有得到更新。)。

图 4:组织化结构:按照功能、需求的术语以及语义化的版本来进行定义

如图所示,我们完全可以不引用具体实体的名字,而直接使用需求和功能来描述一个系统

系统演化和语义化版本的角色

目前,功能与需求是我们了解系统结构的主要途径。然而,要理解时间推移所带来的变化,我们依然还会遇到问题。

  • 在组织结构图中,如果某个员工晋升了,那么原有的关联性是否依旧有效(功能增强)?
  • 在一组互相关联的软件组件中,如果我们重构了其中的一个模块(可能改变其公开接口),原有的依赖是否依然有效?

通过简单的版本化,我们可以观察到系统所发生的变化,却无法了解这些变化所带来的影响。然而,如果采用语义化版本命名方式 (见 http://www.osgi.org/wiki/uploads/Links/SemanticVersioning.pdf ),我们就能够传达系统变化而带来的潜在影响。

这可以通过以下的方式实现:

  • 将功能根据 major.minor.micro 的版本模式来进行版本化。同时我们达成共识,minor 或 micro 这两个版本域代表非破坏性的变化(non-breaking change)。例如,2.7.1➞2.8.7。相反,major 版本域的变化,例如,2.7.1➞3.0.0 表示有破坏性的变化(breaking change),组件的改变可能影响到它的使用者。
  • 需求则使用可接受的功能的版本范围来表示。方括号“[”和“]”表示包含此值,而圆括号“(”和“)”表示不含此值。因此,范围 [2.7.1,3.0.0) 表示任何版本高于或等于 2.7.1 并且低于 3.0.0(不含 3.0.0)的功能都是可接受的

使用这种方式,我们可以看到如果 Helen 代替了 Joe,Tom 的需求依然会得到满足。然而,同样有管理者功能的 Harry 却因为其功能仍是 1.7 版本,不在 Tom 的 [2,3) 需求范围内,所以无法进行替换。

通过使用语义化版本的命名方式可以表达系统变更所带来的影响。再加上需求和功能,我们具备了足够信息,能够保证在满足系统各部分依赖的前提下,进行模块的替换。

我们的工作到此告一段落,这样简单的系统是敏捷且易维护的!

敏捷——从上至下贯穿各层

最后的挑战与复杂性息息相关。试想如果下列情况出现时会发生什么:1)系统的规模和难度不断增长?2)系统的模块数量大幅增加,并且模块间的互相依赖性也大幅增加?有些读者在前面的例子中,可能已经注意到出现了某种程度的自相似性(self-similarity),你们或许已经从中猜到了答案。

服务的使用者选择我们的服务是因为服务所宣称的功能符合它们的需求(见图 1)。而提供服务的系统的实现方式,对服务的使用者而言是不可见的。向下的每一层都沿用这一模式。系统的结构自然而然地根据各组件的功能和需求进行描述。(见图 4)。这时组件的内部结构对于系统而言是不可见的。如图 5 所示,许多逻辑层都可能使用这种模式。

图 5:敏捷的结构:每层只暴露必要的信息。每层都是由组件间的依赖所组成的,这些依赖通过需求和功能来进行表述。

所有真正敏捷的系统都是以分层的层级结构建立起来的。在每个结构化的层次中,各组件的自描述都遵循以下的规则:只描述当前层次的有关信息,关于更低层次的不必要细节是不会描述的。

这种模式不断出现于自然系统和人造系统中。自然生态系统中所构建的大量结构都是由嵌套的模块化组件所组成的。例如:

  • 生物体
  • 器官
  • 组织
  • 细胞

无独有偶,商业组织也有类似结构:

  • 组织
  • 部门
  • 团队
  • 个人

因此,我们也期望复杂的敏捷软件系统也参照这些最优的解决方案:

  • 商业服务
  • 粗粒度的业务组件
  • 细粒度的子服务
  • 代码级别模块

这项进程起源于 20 世纪 90 年代中后期,许多公司开始采用包括面向服务架构(Service Oriented Architecture,SOA)和企业服务总线(Enterprise Service Buses ,ESB’s)为代表的粗粒度模块化技术。商业程序通过已知的服务接口或消息传递的方式,较为宽松地联系在一起。SOA 提倡更加“敏捷”的 IT 环境,即商业系统应该更加易于升级或替换。

然而在许多实际场景中,核心的应用程序一直没有更改。很多现有的程序只是简单地将接口暴露为 SOA 服务。从这一角度来看,SOA 实质上并不能如其保证的那样节省开支和使商业快速化: http://apsblog.burtongroup.com/2009/01/soa-is-dead-long-live-services.html

这是因为内部缺乏模块化,加入 SOA 之后的程序和没加之前一样难以修改

变得敏捷?

我们将在此章节,对目前为止的观点进行小结。

为了“敏捷”,系统必须符合以下的特性:

  • 层级化的结构(Hierarchical Structure):系统必须层级化,每一层由更低一层的组件构成。
  • 隔离性(Isolation):对于每个结构化的层级,高度的隔离性确保参与运行的组件的内部结构将是不可见的。
  • 抽象化(Abstraction):对于每一层,参与运行的组件的行为通过需求和功能加以表达。
  • 自描述(Self-Describing):在每层之中,参与运行的模块间的关系都必须是自描述的。也就是说,依赖性定义将通过需求和功能进行表达。
  • 变化的影响(Impact of Change):通过语义化的版本命名,变化对依赖的影响可以进行表述。

系统按上述原则建立,将是:

  • 易于理解的(Understandable):基于层级化的结构,系统在每一层的结构都易于理解。
  • 高适应性的(Adaptable):在每一层中,结构性模块化保证了变更的影响可以局限在那些相关的模块内部,高度模块化所建立起来的边界能够保护系统的其他部分不受影响。
  • 可演化的(Evolvable):每层中的组件都可以被代替。因此,系统可以支持多样化(diversity)并且是可演化的。

系统可以通过结构性模块化来实现敏捷。

在这个系列的下一部分,我们将会讨论 OSGi™——Java™的模块化框架——如何满足结构性模块化的需求,从而为流行的敏捷方法学奠定基础,最终形成敏捷的企业。

原文英文地址: Agility and Structural Modularity – part I

作者简介

Richard Nicholson是 Paremus 的 CEO 和创始人,这是一个 2001 年成立的软件公司,总部位于英国。

在意识到高度可维护以及高度敏捷的系统在本质上必须是高度模块化的之后,Paremus 在 2004 年开始研究下一代的软件系统。这种持续的努力体现在了 Paremus Service Fabric 产品之中,这是一个高度可适应的、基于 OSGi 的自装配运行时,可用于企业级和云环境。作为 OSGi 联盟的主席(2010-2012),Richard 开始推进 OSGi Cloud 并鼓励 OSGi 联盟参与到敏捷软件社区中。

Richard 在很多的研究领域都保持了浓厚的兴趣,这支撑了 Service Fabric 的研发,他的研究领域包括复杂的适应性系统(Complex Adaptive System)以及敏捷(Agility)、模块化组装(Modular Assembly)、结构化多样性(Structural Diversity)和适应性(Adaption)之间的关系。

成立 Paremus 之前,Richard 在花旗集团 /Salomon Smith Barney,领导着欧洲系统工程(European System Engineering)相关的工作。Richard 获得了曼切斯特大学的物理学荣誉学位,并在格林尼治皇家天文台( Royal Greenwich Observatory)获得天体学物理博士。

Richard 的博客: http://adaptevolve.paremus.com

Paremus 的博客: http://blogs.paremus.com


感谢张卫滨对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ )或者腾讯微博( @InfoQ )关注我们,并与我们的编辑和其他读者朋友交流。

2013 年 11 月 25 日 05:502625

评论

发布
暂无评论
发现更多内容

6.8Doris分析案例(三):扩容伸缩设计

张荣召

C++ primer -- 第十五章 友元,异常和其他

Dreamer

c++

当下工作流管理系统的发展趋势

Marilyn

敏捷开发 快速开发 软件架构 企业开发

6.6Doris分析案例(一): NoSQL案例

张荣召

第二周作业-学习总结

jingx

学习笔记--week06

张荣召

架构师训练营第六周学习笔记

一马行千里

学习 极客大学架构师训练营

C++ primer -- 第十章 对象和类

Dreamer

c++

C++ primer -- 第十三章 类继承

Dreamer

c++

第二周学习总结

刘洋

极客大学架构师训练营

C++ primer -- 第16章 string类和标准模版库

Dreamer

c++

C++ primer -- 第18章 探讨C++新标准

Dreamer

c++

EDA最强攻略,如何为EDA选择存储?

焱融科技

分布式 高性能 存储 半导体 EDA

Forsage矩阵系统开发,智能合约搭建

薇電13242772558

Ubuntu常见问题解决方案与使用技巧

jiangling500

ubuntu

架构师训练营第 6 周:技术选型 (二)

子青

C++ 第九章 内存模型和名称空间

Dreamer

c++

目标检测综述

Dreamer

week2- 作业二,学习总结-框架设计

未来已来

架构师训练营第一期 - 第六周学习总结

卖猪肉的大叔

极客大学架构师训练营

C++primer-函数探幽

Dreamer

c++

c++ primer -- 第14章 C++中代码重用

Dreamer

c++

C++ primer -- 第17章 输入,输出和文件

Dreamer

c++

6.7Doris分析案例(二):高可用和集群扩容设计

张荣召

架构师训练营第一期 - week6

习习

C++ primer --第十一章 使用类

Dreamer

c++

C++ primer -- 第十二章 类和动态内存分配

Dreamer

c++

极客大学 - 架构师训练营第一期 - 第六周作业

Black Eyed Peter

极客大学架构师训练营

Here I come

Dreamer

Caffe 安装踩坑记录

Dreamer

caffe

写文档太麻烦,试试这款 IDEA 插件吧!

程序员小航

Java markdown IDEA idea插件 文档

敏捷与结构性模块化(一)-InfoQ