网易消息推送系统微服务化实践

微服务加上如今的服务发现，在基础设施即代码（指使用脚本配置计算基础设施，而不是手动配置计算机的方法）的过程中，我们正在不断的尝试各种实践方案。如何在云基础设施下结合业务场景，通过负载均衡、服务发现、容器化来实现业务链自动化，这就是本文给大家带来的分享。

困扰和烦恼

首先来看下我们其中一个平台之前的大体架构：

随着业务的递增，我们遇到了以下的问题：

什么是服务发现？

在分布式微服务架构中，一个应用可能由一组职责单一化的服务组成。这时候就需要一个注册服务的机制，注册某个服务或者某个节点是可用的，还需要一个发现服务的机制来找到哪些服务或者哪些节点还在提供服务。

在实际应用中，通常还都需要一个配置文件告诉我们一些配置信息，比如数据连接的地址，Redis 的地址等等。但很多时候，我们想要动态地在不修改代码的情况下得到这些信息，并且能很好地管理它们。

然而，服务发现组件记录了（大规模）分布式系统中所有服务的信息，其它服务可以据此找到这些服务。DNS 就是一个简单的例子。当然，复杂系统的服务发现组件要提供更多的功能，例如，服务元数据存储、 健康 监控、多种查询和实时更新等。服务发现是支撑大规模 SOA 的核心服务。

Consul 介绍

Consul 是一个支持多数据中心分布式高可用，用于服务发现和配置共享的开源工具。它具有开箱即用、可跨系统平台部署（在任何基础架构上连接任何应用）等特点。Consul 的三个主要应用场景：服务发现、服务隔离、服务配置。Consul 关键特性：

Consul 之服务发现

Consul 之服务配置

首先 Consul 集群内的所有数据都是可共享的，任何一个节点都是可以同时获取到集群内最新的数据信息。然后通过一些例如 Key/Value、Server、Node 等等数据进行文本内容渲染，从而达到一个变更的全程实时自动化。例如根据 Key/Value 信息渲染：

例如根据服务信息渲染：

在传统运维方式上可以有哪些改变

传统方式如何向微服务化转变

入口的动态自动化

容器和服务发现始终只是在对内部的通信实现，如何将这些服务快速方便的对外实现通信，并且能够高度自动化呢？我们通过将 HA 作为各类后端服务的对外统一入口；配置 backend 服务时，配置的是 Consul 中的服务域名。从而作为内部和外部通信的一个通信转发枢纽。

HA 的域名动态解析

首先看看容器化下的服务地址是怎样通过 Consul 完成变更的。

然后为什么是 HA 的 DNS 动态解析？这个不是 DNS 的锅么？

在常见的代码更新、服务配置变更、迁移、扩容等需要容器重建时，会导致 N 个容器同时发生 Consul 域名解析变更（当然也是预期内的变更），这个时候需要使用了 Consul 域名的服务在访问失败时能够去重新解析一次域名获取新的 IP，完成解析的自动变更。

需要注意的是这里有个坑，原来使用 HAProxy 15 版本，后端服务配置使用域名时，启动服务后只解析一次（和 Nginx 类似）域名，这时如果已解析的服务挂掉或进行了切换等，即使异常节点已屏蔽，访问 HA 时依然会出现例如 503 等异常（即使 DNS 已经发生了改变，但 HA 服务本身缓存了旧 IP 等于地址未更新）。后续查询官网得知 HAProxy 16+ 才支持了动态DNS。

如何利用 HA 的域名解析配置实现后端路由动态化

首先，HA配置增加一段 resolvers 定义，用来实现 HA 的域名动态解析。

其次，对不同业务环境隔离的路由分发，同样需要增加 HA 的 frontend 配置进行流量隔离。

最后，在 HA 的 backend 处引用前面定义的 resolvers 和 frontend，实现到后端RS的动态转发。

WEB 配置内容自动托管

文件内容更新：使用 Consul 的 K/V watch 功能，一旦有新服务上线/下线时，配置自动化接入和自动化下线流程，更新 Web 服务配置并 reload（触发脚本完成），完成整个流程的自动化。

后端服务自动加入集群

云主机节点自动初始化自身后进行服务注册，自动导入流量。

总的来说，我们根据业务特性，使用 HA、Consul、Docker 这样的一个组合来实现高度可扩展性、稳定性，及流程的基本全自动化过程。

业务链高度自动化，从上线到下线，整个流程包括服务上线、配置变更、产品发布、功能迭代、下线回收等全自动衔接完成。

整个过程至少实现了：

现在（图 A）和原有（图 B）对比如下：

作者：丁易锋，网易 游戏 资深运维工程师，主要工作方向为网易 游戏 项目运维支持。专注于运维技术的突破，以及为产品提供更加高质量和便捷的服务支撑。

本文转载自公众号：网易 游戏 运维平台，原文。

微软公司的云服务核心是Windows Azure。Windows Azure是微软基于云计算的 *** 作系统，它的主要目标是为开发者提供一个平台，帮助开发可运行在云服务器、数据中心、Web和PC上的应用程序。云计算的开发者能使用微软全球数据中心的储存、计算能力和网络基础服务。Azure服务平台包括了以下主要组件：Windows Azure；Microsoft SQL数据库服务，Microsoft Net服务；用于分享、储存和同步文件的Live服务；针对商业的Microsoft SharePoint和Microsoft Dynamics CRM服务。

Windows Azure服务平台 包括5个主要部分：Windows Azure ，Live Services，Microsoft SQL Services，Microsoft NET Services，Microsoft SharePoint Services & Dynamics CRM Services
Windows Azure用于服务托管，以及底层可扩展的存储，计算和网络的管理。
Microsoft SQL Service可以扩展Microsoft SQL Server应用到云中的能力。
Microsoft NET Service使得可以便捷第创建基于云的松耦合的应用程序。另外还包含访问控制机制可以保卫你的程序安全。
Live Service提供了一种一致性的方法，处理用户数据和程序资源，使得用户可以在PC、 手机 、PC应用程序和Web网站上存储、共享、同步文档、照片、文件以及任何信息。
SharePoint Service及Dynamics CRM Service用于在云端提供针对业务内容、协作和快速开发的服务，建立更强的客户关系。

Azure 就是微软云计算所有服务的基础平台，从 Live 服务，到数据服务，到提供 SharePoint 和 Microsoft Dynamics CRM 的空间服务。应用程序即可以运行在云中，也可以运行在本地系统。

Windows Azure 带来的好处
综述
Azure服务平台的设计目标是用来帮开发者更容易地创建web和互联设备的应用程序。它提供了最大限度的灵活性、选择和使用现有技术连接用户和客户的控制。
利于开发者过渡到云计算
世界上数以百万计的开发者使用NET Framework和Visual Studio开发环境。利用Visual Studio相同的环境创建可以编写、测试和部署的云计算应用。
快速获得结果
应用程序可以通过点击一个按钮就部署到Azure服务平台，变更相当简单，不需要停工修正，是个试验新想法的理想平台。
想象并创建新的用户体验
Azure服务平台可以让你创建Web、手机、使用云计算的复杂应用。与 Live Services连接可以访问4亿Live用户，新的使用新方式与用户交流的机会。
基于标准的兼容性
为了可以和第三方服务交互,服务平台支持工业标准协议，包括>

本文主要介绍了架构技术选型与设计-微服务选型，Spring cloud 实现采用的技术，希望对您的学习有所帮助。

架构技术选型与设计-DUBBODubbo，是阿里巴巴服务化治理的核心框架，并被广泛应用于阿里巴巴集团的各成员站点(阿里巴巴现在使用架构为HSF)。 于2012-10-24最后版本253成为最后一版本，由当当接手维护，命名为dubbox；2017年突然继续dubbo进行维护，最后更新版本时间为 2017-10-11 22:21

Dubbo 核心部件:Provider： 暴露服务的提供方。Consumer：调用远程服务的服务消费方。Registry： 服务注册中心和发现中心。Monitor： 统计服务和调用次数，调用时间监控中心。（dubbo的控制台页面中可以显示）Container：服务运行的容器。Dubbo服务集群-集群容错模式

架构技术选型与设计-微服务选型

架构技术选型与设计-DUBBO

架构技术选型与设计-DUBBO

架构技术选型与设计-微服务选型Spring Cloud，从命名我们就可以知道，它是Spring Source的产物，Spring社区的强大背书可以说是Java企业界最有影响力的组织了，除了Spring Source之外，还有Pivotal和Netfix是其强大的后盾与技术输出。其中Netflix开源的整套微服务架构套件是Spring Cloud的核心。如果拿Dubbo与Netflix套件做对比，前者在国内影响力较大，后者在国外影响力较大，在背景上可以打个平手；但是若要与Spring Cloud做对比，由于Spring Source的加入，在背书上，Spring Cloud略胜一筹，但是在高并发上dubbo曾经在阿里的运营中实际承载过过亿用户同时在线的，而Netflix 并没有实际的上线应用中体现过。Spring Cloud下面有19个子项目（可能还会新增）分别覆盖了微服务架构下的方方面面，服务治理只是其中的一个方面，一定程度来说，Dubbo只是Spring Cloud Netflix中的一个子集。但是在选择框架上，方案完整度恰恰是一个需要重点关注的内容，当然从高可用和高并发一起考虑，Spring Cloud 无疑是最佳选择。

1、Spring Cloud Config 配置中心，利用git集中管理程序的配置。

2、Spring Cloud Netflix 集成众多Netflix的开源软件

3、Spring Cloud Bus 消息总线，利用分布式消息将服务和服务实例连接在一起，用于在一个集群中传播状态的变化

4、Spring Cloud for Cloud Foundry 利用Pivotal Cloudfoundry集成你的应用程序

5、Spring Cloud Cloud Foundry Service Broker 为建立管理云托管服务的服务代理提供了一个起点。

6、Spring Cloud Cluster 基于Zookeeper, Redis, Hazelcast, Consul实现的领导选举和平民状态模式的抽象和实现。

7、Spring Cloud Consul 基于Hashicorp Consul实现的服务发现和配置管理。

8、Spring Cloud Security 在Zuul代理中为OAuth2 rest客户端和认证头转发提供负载均衡

9、Spring Cloud Sleuth SpringCloud应用的分布式追踪系统，和Zipkin，HTrace，ELK兼容。

10、Spring Cloud Data Flow 一个云本地程序和 *** 作模型，组成数据微服务在一个结构化的平台上。

11、Spring Cloud Stream 基于Redis,Rabbit,Kafka实现的消息微服务，简单声明模型用以在Spring Cloud应用中收发消息。

12、Spring Cloud Stream App Starters 基于Spring Boot为外部系统提供spring的集成

14、Spring Cloud Task App Starters

15、Spring Cloud Zookeeper 服务发现和配置管理基于Apache Zookeeper。

16、Spring Cloud for Amazon Web Services 快速和亚马逊网络服务集成。

17、Spring Cloud Connectors 便于PaaS应用在各种平台上连接到后端像数据库和消息经纪服务。

18、Spring Cloud Starters （项目已经终止并且在AngelSR2后的版本和其他项目合并

）19、Spring Cloud CLI 插件用Groovy快速的创建Spring Cloud组件应用。Spring Cloud共集成了19个子项目，里面都包含一个或者多个第三方的组件或者框架！

1、spring cloud ： 一个云应用工具，为云应用开发的配置管理、服务发现、断路器、智能路由、微代理、控制总线、全局锁定、决策竞选、分布式会话和集群状态管理等 *** 作

2、spring cloud config ：配置管理开发工具包

3、 spring cloud Bus ：事件消息总线用于集群（例如：配置变化时间）中传播状态变化，与spring cloud config 联合实现热部署

4、 spring cloud Netflix Eureka ： 云端负载均衡基础，一个基于Rest的服务，用于定位服务，以实现云端的负载均衡和中间层服务器的故障转移

5、 spring cloud Netflix Hystrix ： 容错管理工具，旨在通过控制服务和第三方库的节点，从而对延迟和故障提供更强大的容错能力

6 、 Netflix ZUUL： 边缘服务工具，提供动态路由、监控、d性、安全等边缘服务

7、 spring cloud sleuth ：日志收集工具包、封装Purpose 、Zipkin和Trace

8、 Spring Cloud Security ： 安全工具包，为应用程序添加安全控制，主要是OAuth2

9、 spring cloud turbine ：聚合服务器发送时间流，监控集群下Netflix 和 metrics 情况

Spring cloud 配置中心

Spring cloud 注册中心

Spring cloud 网关: 服务路由、安全认证、会话共享、客户端负载均衡、统一异常处理、跨域请求

Spring cloud 断路由

将异步通信用于微服务的场合，通常使用消息代理(Message Broker)。消息代理确保不同微服务之间的通信可靠稳定，保证消息在系统内得到管理和监视，并且消息不会被丢失。

开发者可以选择的一些消息代理有很多，它们的规模和数据功能各不相同。本篇文章将比较三种最受欢迎的消息代理：RabbitMQ，Kafka与Redis。

首先让我们了解微服务通信。

在微服务之间有常见的两种通信方式：同步与异步。

在同步通信中，调用方在发送下一条消息之前等待响应，并且它作为>

云计算市场的许多小规模提供商的云计算服务和产品在速度、成本、灵活性，甚至在本地部署和混合云选项方面都会对全球云计算行业巨头构成挑战。

云计算平台的规模一定很大，对吧如果云计算的最佳功能是用户只需点击几秒钟并启动一台机器，那么必然需要建设和运营部署大量服务器的大量数据中心。

不过，“大”这个词是相对的。规模最大的云计算行业巨头AWS、Microsoft Azure、谷歌云可能会占据大部分市场份额，但它们并不能阻碍云计算市场其他提供商的发展。一些规模较小的云计算提供商正在开发利基市场，并采用其他的竞争方式，然而与云计算行业巨头相比，他们的服务器数量确实微不足道。

人们普遍发现，这些“微不足道”的云计算提供商也在全球范围内运营着数十个数据中心，而这些数据中心也拥有足够数量的服务器，只是没有云计算巨头那么多。

事实证明，对于开发人员来说，规模并不总是最具吸引力的选择。机器实例几乎是运行在普通 *** 作系统的普通硬件，软件可以迁移以寻找更好的选择。云计算公司在用户界面、复杂功能、速度等方面展开了竞争，有时甚至在规模、价格等看似明显的优势方面的云计算巨头也面临一些竞争。

微服务架构的发展正在孕育更广泛的云计算市场。将工作负载分成N个不同部分的开发人员不需要将自己限制在一个云平台中。当连续的数据包流正在传输时，保持软件在同一数据中心运行是有意义的，但通常可能会将应用程序分解为许多松散链接的代码块，偶尔交换消息，并且不需要最快的响应速度。如果有充分的理由，后台处理和分析功能很容易转移到不同的云平台。如果企业在为系统创建体系结构时非常谨慎，甚至可以将每个微服务放在不同的云平台上。

所有这一切都意味着云计算之战并不局限于规模最大化。以下是十几个规模较小的云计算提供商，他们的云计算产品和服务也有自己独特的优势，它们都很吸引人，但并不是客户唯一的选择。当他们超越规模最大的竞争对手时，人们发现云计算市场是一个令人惊讶的巨大和多样化的市场。

1Wasabi公司

2Vultr公司

云计算提供商Vultr公司通过以每小时250美元的价格提供最低价格的实例，按小时计费。这台机器只配备512KB的内存，适用于静态Web服务器，但用户可以花费更多的费用购买更大的机器实例。

该公司已经扩展了其产品线，其中包括裸机服务器，这些服务器没有虚拟化层的阻碍。还有专门的服务器，可以减少与攻击者共享同一个服务器的威胁。Vultr公司在全球运营16个数据中心。其云平台的界面很灵活，但是提供的服务有限并且比较基础，可能提供的仅仅是命令行。如果用户希望服务器在引导时运行脚本，则可以使用一个很好的输入字段来键入脚本。但以每月250美元的价格计算，要求过高将是错误的。

3UpCloud公司

UpCloud公司的亮点是提供持久硬盘存储服务，该公司称，它提供比SSD硬盘更快的性能。在启动和持续性能方面甚至可能快50%。用户必须测试其应用程序才能确定，因为速度将根据计算和数据获取的混合而变化。

UpCloud的许多其他部分也令人熟悉。UpCloud在全球运行API、一系列标准模板和数据中心，其中两个位于赫尔辛基的UpCloud公司总部附近。UpCloud提供公共云托管、私有选项和一些软件层来创建组合。软件定义的网络很快就会到来。

其基本实例提供1GB内存和25GB硬盘存储空间，起价为5美元，并以与竞争对手大致相同的方式向上扩展。UpCloud并不一定能提供更低的价格，但提供更快的磁盘访问。

4Packet公司

Packet可能规模相对较小，但它提供功能齐全的专门服务器，它们以“裸机”运行客户的应用程序。这意味着客户的I/O和存储 *** 作不会因无限的虚拟化层而陷入困境(至少在客户通过过度的容器化添加自己的虚拟化层之前，这是客户的责任)。

客户需要为采用Packet的机器支付更多费用，但其获得回报更多。c1largearm机器配备128GB的内存和32个核心处理器，其价格是每小时1美元，在一个月内累计超过672小时。Packet还采用一些配置较低的服务器，配备8 GB内存和4个核心处理器，每小时只需7美分。

其具备的一个很好的特性是现货定价市场，客户可以在那里出价购买硬件。一些需求放缓时的价格似乎比清单上的价格便宜50%以上。Packet在全球运营18个数据中心，还提供RESTful API，以及使用企业的配置、安全和管理软件的本地版本构建混合云的大量选项。

5Linode公司

另一家提供小型灵活的Linux机器root访问权限的云计算提供商是Linode公司，其价格每月低至5美元。Linode公司支持全球9个数据中心的10个主要Linux发行版，其运营的第10个数据中心在印度孟买。

如果客户需要安装特定服务，Linode公司的用户社区将共享大量启动脚本，这些脚本将安装正确的软件并自定义配置。这些脚本涵盖了大多数主要应用程序，如WordPress、Plesk、代理服务器、Open和LAMP堆栈。客户还可以创建自己构建的脚本。

6Hidora公司

如果客户使用一些标准模型(NoDEJS、PHP、Java)部署Web应用程序，Hidora公司提供一个PaaS(平台即服务)来适应。该公司认为，其灵活的扩展以更好的价格提供了更好的性能。可以将负载平衡、备份和空闲出站带宽等服务整合到捆绑包中。

Hidora是如何扩展和更新旧的共享托管模型以支持现代微服务架构的一个很好的例子。如果客户想要获得root访问权限，Hidora公司会提供虚拟专用服务器，但客户也可以将Docker容器部署到其Kubernetes集群。

Hidora将其服务器部署在瑞士，并确保它们受到瑞士数据保护法的保护。

7DigitalOcean公司

DigitalOcean之所以受到开发人员的欢迎，是因为它简化了虚拟机的启动、大小调整和拆除虚拟机的过程，DigitalOcean称之为“Droplets”。在取得一些成功之后，该公司最近扩展了PostgreSQL数据库的更多托管服务、数据桶和Kubernetes集群。Droplet按小时计费，但当月计费的小时数上限为672小时，即四周的小时数，因此每个月的价格都相同。该公司将其价格设置为5美元的倍数，使账单计算更加简单。DigitalOcean公司在全球8个城市拥有并运营12个数据中心。

8Shared hosting公司

Shared hosting的云服务由共享Web服务器提供。客户在LAMP服务器上租借了一个帐户，上传了其HTML、JavaScript/HP，并按月支付费用，虽然不会给客户提供root权限，但有时会让客户使用Telnet。

许多专门提供这些服务的公司(IONOS、A2、BlueHost、HostGator、InMotion)已经逐渐扩展到云服务器业务，提供虚拟专用服务器和专用服务器。其计费通常按月计算，时间长达三年。

Shared hosting公司似乎对每隔几个小时启动和拆除机器以满足需求飙升的客户感兴趣。尽管如此，它们仍然是一个灵活的选项，可用于小型专用项目。

9Antsle公司

Antsle公司可能是规模最小的云计算提供商。Antsle公司提供了一款无风扇服务器，可以放在桌面上，通过客户自己的“云托管”仪表板创建Gentoo Linux实例。这个服务器小而安静，提供云计算的大部分灵活性和功能。其CPU功率取决于客户购买的产品，客户可以通过控制物理安全性和保持一切可见性来运行工作负载，从而获得更大的工作量。

Antsle公司还正在为其支持其他硬件的软件版本进行封闭测试。或者客户也可以在裸机服务器Antsle主机中使用相同的界面和软件。

云南蓝队云计算有限公司是2012-05-08在云南省昆明市盘龙区注册成立的有限责任公司(自然人投资或控股)，注册地址位于云南省昆明市盘龙区王旗营金领地国际商务大厦4层。

云南蓝队云计算有限公司的统一社会信用代码/注册号是915301035945771569，企业法人周朝坤，目前企业处于开业状态。

云南蓝队云计算有限公司的经营范围是：计算机软硬件的开发及应用；计算机系统集成及综合布线；图文设计制作；计算机及配件、耗材的销售和维修；电子产品、办公用品的销售；第一类增值电信业务中的因特网数据中心业务；第一类增值电信业务中的互联网接入服务业务；第二类增值电信业务中的信息服务业务（不含互联网信息服务）；第二类增值电信业务中的信息服务业务（仅限互联网信息服务）；第二类增值电信业务中的互联网域名解析服务业务（依法须经批准的项目，经相关部门批准后方可开展经营活动）。在云南省，相近经营范围的公司总注册资本为2149365万元，主要资本集中在100-1000万和1000-5000万规模的企业中，共7192家。本省范围内，当前企业的注册资本属于一般。

通过百度企业信用查看云南蓝队云计算有限公司更多信息和资讯。

---