文章网建站,indesign做网站,聚搜济南网站建设公司,上海正规建设网站私人订制原文链接#xff1a;http://www.iteye.com/news/31115 当我们架设一个系统的时候通常需要考虑到如何与其他系统交互#xff0c;所以我们首先需要知道各种系统之间是如何交互的#xff0c;使用何种技术实现。 1. 不同系统不同语言之间的交互 现在我们常见的不同系统不同语…原文链接http://www.iteye.com/news/31115 当我们架设一个系统的时候通常需要考虑到如何与其他系统交互所以我们首先需要知道各种系统之间是如何交互的使用何种技术实现。 1. 不同系统不同语言之间的交互 现在我们常见的不同系统不同语言之间的交互使用WebServiceHttp请求。WebService即“Web 服务”简写为 WS。从字面上理解它其实就是“基于 Web 的服务”。而服务却是双方的有服务需求方就有服务提供方。服务提供方对外发布服务服务需求方调用服务提供方所发布的服务。如果说得再专业一点WS 其实就是建立在 HTTP 协议上实现异构系统通讯的工具。没错WS 说白了还是基于 HTTP 协议的也就是说数据是通过 HTTP 进行传输的。最早我们是用CXF开发SOAP服务实现WS后面我们是用REST服务实现WS(这个目前使用比较多也最我用得最多的这一种)。基于CXF也可以开发REST服务不过我们一般直接使用springMVC或者其他MVC框架实现REST服务。 但是在很多人的印象中Web service的话一般指十来年前IBM主导的基于XML的各种交互技术现在除了一些公司在用之外用得人也很少了。广义的话Webservice就是Web 服务了一切皆服务。 2. 不同系统相同语言之间的交互 常见的不同系统相同语言之间的交互用RPC(远程过程调用)或者RMI(远程方法调用)实现不用对外部提供服务当然上面说的也可以使用在相同语言之间的交互,只是我常用的是RPC。 不同产品的架构 3. 单个产品的架构演进 一般我们只是一个产品的情况下的架构演进历程如果需要对外提供webService通常使用REST服务实现。 以下一段内容来源于知乎 1)分布式架构的演进系统架构演化历程-初始阶段架构 初始阶段 的小型系统 应用程序、数据库、文件等所有的资源都在一台服务器上通俗称为LAMP 特征应用程序、数据库、文件等所有的资源都在一台服务器上。 描述通常服务器操作系统使用linux应用程序使用PHP开发然后部署在Apache上数据库使用Mysql汇集各种免费开源软件以及一台廉价服务器就可以开始系统的发展之路了。 2)系统架构演化历程-应用服务和数据服务分离 好景不长发现随着系统访问量的再度增加webserver机器的压力在高峰期会上升到比较高这个时候开始考虑增加一台webserver 特征应用程序、数据库、文件分别部署在独立的资源上。 描述数据量增加单台服务器性能及存储空间不足需要将应用和数据分离并发处理能力和数据存储空间得到了很大改善。 3)系统架构演化历程-使用缓存改善性能 特征数据库中访问较集中的一小部分数据存储在缓存服务器中减少数据库的访问次数降低数据库的访问压力。 描述系统访问特点遵循二八定律即80%的业务访问集中在20%的数据上。缓存分为本地缓存和远程分布式缓存本地缓存访问速度更快但缓存数据量有限同时存在与应用程序争用内存的情况。 4)系统架构演化历程-使用应用服务器集群 在做完分库分表这些工作后数据库上的压力已经降到比较低了又开始过着每天看着访问量暴增的幸福生活了突然有一天发现系统的访问又开始有变慢的趋势了这个时候首先查看数据库压力一切正常之后查看webserver发现apache阻塞了很多的请求而应用服务器对每个请求也是比较快的看来 是请求数太高导致需要排队等待响应速度变慢 特征多台服务器通过负载均衡同时向外部提供服务解决单台服务器处理能力和存储空间上限的问题。 描述使用集群是系统解决高并发、海量数据问题的常用手段。通过向集群中追加资源提升系统的并发处理能力使得服务器的负载压力不再成为整个系统的瓶颈。 5)系统架构演化历程-数据库读写分离 享受了一段时间的系统访问量高速增长的幸福后发现系统又开始变慢了这次又是什么状况呢经过查找发现数据库写入、更新的这些操作的部分数据库连接的资源竞争非常激烈导致了系统变慢 特征多台服务器通过负载均衡同时向外部提供服务解决单台服务器处理能力和存储空间上限的问题。 描述使用集群是系统解决高并发、海量数据问题的常用手段。通过向集群中追加资源使得服务器的负载压力不在成为整个系统的瓶颈。 6)系统架构演化历程-反向代理和CDN加速 特征采用CDN和反向代理加快系统的 访问速度。 描述为了应付复杂的网络环境和不同地区用户的访问通过CDN和反向代理加快用户访问的速度同时减轻后端服务器的负载压力。CDN与反向代理的基本原理都是缓存。 7)系统架构演化历程-分布式文件系统和分布式数据库 随着系统的不断运行数据量开始大幅度增长这个时候发现分库后查询仍然会有些慢于是按照分库的思想开始做分表的工作 特征数据库采用分布式数据库文件系统采用分布式文件系统。 描述任何强大的单一服务器都满足不了大型系统持续增长的业务需求数据库读写分离随着业务的发展最终也将无法满足需求需要使用分布式数据库及分布式文件系统来支撑。分布式数据库是系统数据库拆分的最后方法只有在单表数据规模非常庞大的时候才使用更常用的数据库拆分手段是业务分库将不同的业务数据库部署在不同的物理服务器上。 8)系统架构演化历程-使用NoSQL和搜索引擎 特征系统引入NoSQL数据库及搜索引擎。 描述随着业务越来越复杂对数据存储和检索的需求也越来越复杂系统需要采用一些非关系型数据库如NoSQL和分数据库查询技术如搜索引擎。应用服务器通过统一数据访问模块访问各种数据减轻应用程序管理诸多数据源的麻烦。 9)系统架构演化历程-业务拆分 特征系统上按照业务进行拆分改造应用服务器按照业务区分进行分别部署。 描述为了应对日益复杂的业务场景通常使用分而治之的手段将整个系统业务分成不同的产品线应用之间通过超链接建立关系也可以通过消息队列进行数据分发当然更多的还是通过访问同一个数据存储系统来构成一个关联的完整系统。纵向拆分将一个大应用拆分为多个小应用如果新业务较为独立那么就直接将其设计部署为一个独立的Web应用系统纵向拆分相对较为简单通过梳理业务将较少相关的业务剥离即可。横向拆分将复用的业务拆分出来独立部署为分布式服务新增业务只需要调用这些分布式服务横向拆分需要识别可复用的业务设计服务接口规范服务依赖关系。 10)系统架构演化历程-分布式服务 Q分布式服务应用会面临哪些问题 (1) 当服务越来越多时服务URL配置管理变得非常困难F5硬件负载均衡器的单点压力也越来越大。 (2) 当进一步发展服务间依赖关系变得错踪复杂甚至分不清哪个应用要在哪个应用之前启动架构师都不能完整的描述应用的架构关系。 (3) 接着服务的调用量越来越大服务的容量问题就暴露出来这个服务需要多少机器支撑什么时候该加机器 (4) 服务多了沟通成本也开始上升调某个服务失败该找谁服务的参数都有什么约定 (5) 一个服务有多个业务消费者如何确保服务质量 (6) 随着服务的不停升级总有些意想不到的事发生比如cache写错了导致内存溢出故障不可避免每次核心服务一挂影响一大片人心慌慌如何控制故障的影响面服务是否可以功能降级或者资源劣化 这个好像是
大型网站技术架构核心原理与案例分析
开篇的内容不过作者总结得不错我就转载一下吧。 4. 产品线的架构还有一种就是上面也有提到的业务拆分。现在我们需要做一个产品线我们只需要一个数据层一个通用业务逻辑层前面还有各种应用和界面层,不需要对外部系统(外部公司的系统)提供服务的情况以前我们一般会选择用EJB等来构建分布式应用但是现在我们可以使用dobbo、thrift、avro、hessian这类RPC框架来构建分布式应用实现不同应用和数据来源的交互。这种结构模式下我们需要对其他公司提供服务可以专门写一个应用对外部系统提供rest服务。一般大多数互联网服务背后都要访问十几个甚至几百个内部服务它们之间的通信方式一般都是RPC就像访问一个远程方法那样输入参数后等待返回结果。这对于构建复杂系统是最容易理解的方式。 如下图的模型文件系统缓存那些没有画出来大家理解就行。 结语不管哪种架构我们都需要做好模块化(尽量做到模块复用)。不要为了架构而架构导致过度设计。不管何种架构都是为了更好满足业务需求架构应该跟随业务的发展而发展。当前的架构如果可以满足当前的业务发展就可以考虑下一步的扩展了不用一下子考虑3步4步甚至更多。
