ENode 2.6 架构与设计简介以及全新案例分享

前言

ENode是一个应用开发框架,为开发人员提供了一整套基于DDD+CQRS+ES+EDA架构风格的解决方案。ENode从发布1.0开始到现在,我几乎每周都在更新设计或实现代码。以至于从来没有一个稳定的版本可以提供给大家,非常惭愧。但我相信,随着时间的推移和我的努力的积累,ENode一定会越来越稳定和成熟的。我觉得我此刻很幸福,因为我有自己的兴趣且有机会为了自己的兴趣而奋斗。

ENode开源地址:https://github.com/tangxuehua/enode

今天是个开心的日子,因为我终于使用ENode开发出了一个比较有说服力的真实案例,一个在线会议位置管理与订购系统。该案例与微软的Microfost CQRS Journey案例的功能一致,只是是用ENode开发完成的。目的是为了展示:

  1. 如何使用ENode支持DDD领域层的实现;
  2. 如何使用ENode实现CQRS+ES的架构;
  3. 如何使用ENode实现消息驱动的架构(EDA);

另外,在案例开发过程中,也不断发现了ENode, EQueue的很多问题。所以,通过做这个案例,也帮助ENode, EQueue完善了很多。真是要实践才能进步啊!

ENode架构简介

ENode目前的架构已经和最初的1.0版本有较大的差别了。比如,没有了对Redis的依赖,增加了Command Store的设计。最新版本的ENode架构图如下:

熟悉CQRS架构的人应该对这个图不太陌生。需要强调的有两点:

  1. 新版的架构图中,Domain Aggregate是常驻内存的;聚合根的职责就是封装状态、业务规则,同时产生领域事件;
  2. 新增了一个Command Store,用于实现Command的幂等处理;

关于图中的其他部分的介绍,请参看我之前写的关于ENode系列的文章。

ENode关键特性

  1. 实现了CQRS架构,支持分布式,基于队列的水平扩展,框架设计之初就考虑了架构的各个节点的水平扩展;
  2. 面向高并发设计;架构层面,充分考虑到了如何解决并发问题;通过用EQueue实现服务器之间的消息路由、通过单机内部实现类似Actor Mailbox的设计,从而避免并发的产生。提高CQRS架构C端的整体写入吞吐量;即便在某些极端情况下出现并发问题,也支持自动的乐观检测,并自动重试;另外,架构层面,规定一个command只能涉及一个聚合根的修改,从而规范应用开发者必须严格按照消息驱动的思路来实现复杂的业务流程,而不能使用工作单元的方式,以事务的方式实现数据的强一致性;
  3. 严谨的消息幂等处理支持;由于ENode是消息驱动的架构,所以对消息的幂等性处理,是框架关注的一个重要的方面,并在架构层面做了支持。这使得应用开发人员不必担心消息的重复处理带来的问题。
  4. Domain Aggregate常驻内存;这个设计可以提高C端command的处理性能。因为我们不必像传统的方式那样先把聚合根从db取出来,再修改,再保存回去了;
  5. 框架为开发人员展示了如何更好的实现Sagas,在CQRS架构中,Sagas指基于消息驱动的业务流程;一个Saga包含若干个聚合根以及一个(通常)流程管理器(Process Manager);聚合根维护流程中的所有参与者对象的状态以及流程本身的状态,流程管理器负责定义和实现流程控制逻辑,无状态;流程管理器的实现是通过响应事件、异常、应用层消息,然后发送相应的命令,从而实现消息驱动的流程;
  6. 采用Event Sourcing(简称ES)的方式来持久化聚合根状态;通过ES实现聚合根状态的还原以及通用的并发控制,通过聚合根ID+事件版本号作为唯一索引的思路实现乐观并发控制;
  7. 消息除了command, domain event外,还支持exception message, application message;这两种消息是我们在遇到有些消息不适合用domain event来表达时需要使用到;比如聚合里有时我们要修改某个状态前会先做业务规则的检查判断,如果不合法,通常会抛异常,然后这个异常我们又希望可以让流程管理器知道,从而流程管理器可以做后面的回滚或补偿措施;另外,我们有时可能会在应用层面(command handler里)和其他外部系统发生交互,那交互的结果,使用应用层的消息更合理;ENode在架构层面,对上面这些消息做了统一的支持;
  8. 框架提供返回单个command执行结果以及阻塞等待command执行结果的支持,这个对于开发者希望同步执行command并知道command执行结果的时候,非常有帮助;这样开发者就不用自己去轮训了。
  9. 除了对消息的幂等处理的支持外,ENode对domain event的顺序处理,也做了充分的考虑和支持,确保当C端产生的domain event同步到Q端时,Q端处理时,框架层面能确保Q端的处理顺序不会乱序。从而保证C,Q两端的数据是最终一致的;
  10. 保证消息能至少被处理一次;主要思路是确保消息的:1)持久化;2)消息ACK后才认为已消费;
  11. 支持一个聚合根一次可以产生多个domain event;虽然大部分情况,一个聚合根一次只会产生一个domain event,但有些场景,可能会产生两个或多个。此时,这些事件会以一个事件流的方式一起apply到当前聚合根;同时,在Q端,框架也会通过必要的手段,与用户代码一起保证了事件流中的事件的处理顺序的正确性;
  12. ENode所使用的分布式消息队列EQueue,参考了阿里的RocketMQ的架构思想,具有高性能、可扩展、轻量级的特性,支持不受限于机器内存大小的消息堆积能力,而且是纯C#开发。同时还提供了简单实用的管理控制台,可以让我们轻松的管理消息队列。比如可以方便的动态增加、禁用、启用、删除队列,查询消息内容、消息消费进度,等信息;目前,EQueue也已经经过多个迭代,并且已经有真实用户进行使用,功能基本趋于成熟稳定。

Conference案例简介

Conference是一个微软开发的,基于DDD+CQRS+ES的一个开源项目。项目主页:cqrsjourney.github.io

这个项目,对我们大家学习DDD领域驱动设计、CQRS+ES的架构,非常有帮助。

  • 该案例从业务上,实现了一个典型的电子商务系统的关键环节:商品管理、库存管理、下单、减库存、支付;
  • 该案例从技术上,很好的展示了CQRS架构的优点。比如可以在Q端定制不同的视图,以应对不同的查询需求;
  • 该案例很好的向我们展示了如何划分领域,划分边界上下文(bounded context),并如何使用不同的架构技术,实现不同的上下文,非常具有学习价值。

正是因为这个项目的以上优点,让我有兴趣使用ENode作为技术支撑,实现同样功能的系统。在重写的过程中,保留了所有非技术的东西,比如边界上下文的划分、领域层等;所有技术相关的部分,用ENode替代。

使用ENode实现的Conference开源项目地址:https://github.com/tangxuehua/conference

演示地址,后台:http://www.enode.me/conference,前台:http://www.enode.me/registration

希望有兴趣的同学,可以去下载源代码进行研究。了解ENode,最快的方法就是从案例代码开始。如果想进行交流,可以加QQ群:185916873,随时欢迎有兴趣的道友加入。

最后,贴一个Conference案例中订单处理的Sagas流程图:

不早了,实在写不下去了,就到这吧。

时间: 2024-08-08 22:07:13

ENode 2.6 架构与设计简介以及全新案例分享的相关文章

UI设计:C4D作品案例分享

中文名4D电影,外文名CINEMA 4D,研发公司为德国Maxon Computer,特点为极高的运算速度和强大的渲染插件,使用在电影<毁灭战士>.<阿凡达>中,获得贸易展中最佳产品'的称号,前身为FastRay. CINEMA 4D拥有快速的渲染速度,可以在最短的时间内创造出最具质感和真实感的作品.C4D拥有丰富而强大的预置库,你可以轻松的从它的预置中找到你需要模型.贴图.材质.照明.环境.动力学.甚至是摄像机镜头预设,大大提高了我们的工作效率.从其他三维软件导入进来的项目文件都

微信红包的架构设计简介

@来源于QCon某高可用架构群整理,整理朱玉华. 背景:有某个朋友在朋友圈咨询微信红包的架构,于是乎有了下面的文字(有误请提出,谢谢) 概况:2014年微信红包使用数据库硬抗整个流量,2015年使用cache抗流量. 微信的金额什么时候算? 答:微信金额是拆的时候实时算出来,不是预先分配的,采用的是纯内存计算,不需要预算空间存储.. 采取实时计算金额的考虑:预算需要占存储,实时效率很高,预算才效率低. 实时性:为什么明明抢到红包,点开后发现没有? 答:2014年的红包一点开就知道金额,分两次操作

常见Struts、Hibernate、Spring、J2EE、ibatis、Oracle等开发框架架构图及其简介

各种系统架构图及其简介 转载请保留出处,不胜人生一场醉汇总. 以下文字和架构图均在本人相关系统设计和架构方案中有所应用. 原文出处:http://space.itpub.net/6517/viewspace-609654 1.Spring架构图 Spring 是一个开源框架,是为了解决企业应用程序开发复杂性而创建的.框架的主要优势之一就是其分层架构,分层架构允许您选择使用哪一个组件,同时为 J2EE 应用程序开发提供集成的框架.Spring 框架的功能可以用在任何 J2EE 服务器中,大多数功能

基于Flume的美团日志收集系统(一)架构和设计【转】

美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收集系统>将分两部分给读者呈现美团日志收集系统的架构设计和实战经验. 第一部分架构和设计,将主要着眼于日志收集系统整体的架构设计,以及为什么要做这样的设计. 第二部分改进和优化,将主要着眼于实际部署和使用过程中遇到的问题,对Flume做的功能修改和优化等. 1 日志收集系统简介 日志收集是大数据的基石.

基于Flume的美团日志收集系统(一)架构和设计

来自:美团技术博客 http://tech.meituan.com/mt-log-system-arch.html 美团的日志收集系统负责美团的所有业务日志的收集,并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流.美团的日志收集系统基于Flume设计和搭建而成. <基于Flume的美团日志收集系统>将分两部分给读者呈现美团日志收集系统的架构设计和实战经验. 第一部分架构和设计,将主要着眼于日志收集系统整体的架构设计,以及为什么要做这样的设计. 第二部分改进和优化,将主要着眼于

Java开源生鲜电商平台-Java后端生成Token架构与设计详解(源码可下载)

Java开源生鲜电商平台-Java后端生成Token架构与设计详解(源码可下载) 目的:Java开源生鲜电商平台-Java后端生成Token目的是为了用于校验客户端,防止重复提交. 技术选型:用开源的JWT架构. 1.概述:在web项目中,服务端和前端经常需要交互数据,有的时候由于网络相应慢,客户端在提交某些敏感数据(比如按照正常的业务逻辑,此份数据只能保存一份)时,如果前端多次点击提交按钮会导致提交多份数据,这种情况我们是要防止发生的. 2.解决方法: ①前端处理:在提交之后通过js立即将按钮

微服务架构的设计和实践-培训感悟

这两天(4月8号,9号)我有幸参加了极客邦的培训课程-微服务架构的设计和实践,能够面对面倾听58架构师-孙玄的亲身授课,个人也是感到非常的荣幸.两天的时间,来回于广州和深圳,虽然不能说自己的技术有了一个质的提升,但至少也是一次很好的交流体现,这一趟不白走! 身为一个技术小白(虽然个人也有四年的开发经验,但大多的技术只是知其然而不知其所以然,而且接触面太狭隘),此次学习最明显的感受是,如果你只会写软件代码,了解与某种语言相关的语法,框架以及架构包括技术,那你肯定会"死的很惨".作为软件行

大规模分布式系统架构与设计实战摘录

大规模分布式系统架构与设计实战摘录 一位网站资深架构师曾经说过:在互联网公司呆一年,相当于在传统软件公司呆三年. 他的意思大概是在互联网公司一年遇到的问题比传统软件公司三年遇到的问题还多.而且 随着网站业务的快速发展,问题也层出不穷,没年遇到的问题都不同. 遇到问题,解决问 题,经历了这个过程,技术才能升华,人和技术才能融为一体,才知道什么技术是真正有 用的,什么技术是花拳绣腿.大型网站的技术本质都很简单,掌握起来也不难.大型网站 的架构师最有价值的地发不在于他们掌握了多少技术,而在于他们经历多

.NET应用架构设计—重新认识分层架构(现代企业级应用分层架构核心设计要素)

阅读目录: 1.背景介绍 2.简要回顾下传统三层架构 3.企业级应用分层架构(现代分层架构的基本演变过程) 3.1.服务层中应用契约式设计来解决动态条件不匹配错误(通过契约式设计模式来将问题在线下暴露出来) 3.2.应用层中的应用控制器模式(通过控制器模式对象化应用层的职责) 3.3.业务层中的命令模式(事务脚本模式的设计模式运用,很好的隔离静态数据) 4.服务层作为SOA契约公布后DTO与业务层的DomainModel共用基本的原子类型 5.两种独立业务层职责设计方法(可以根据具体业务要求来搭