传统的ALL IN ONE存在的问题

  • 耦合严重
  • 职责不分明
  • 运维成本高
  • 模块大、臃肿
  • 性能极限差
  • 牵一发动全身
  • 开发成本高、效率低下
  • 组件间相互影响,一旦一个组件有问题整个服务都受影响
  • 扩展性差

分层原则

  • 数据库服务和逻辑服务分离
  • 逻辑服务和接入服务分层
  • 接入服务和展示服务分离

设计原则

  1. 分层服务功能单一 数据 逻辑 接入 展示
  2. 分层低耦合 接口交付
  3. 分层高内聚 功能聚焦单一

如何分层

  1. 前端框架 MVC框架分层

  2. 后端架构 按照功能水平划分 四层: 接入层、逻辑层、数据层、数据存储 接入层、逻辑层、原子服务层、数据存储 五层: 接入层、序列号层(异步消息队列)、逻辑层、数据层、数据存储

    按照业务垂直拆分 房产、招聘、二手 IM、交友等

常遇到问题

  • 数据不兼容、误删除 数据备份

案例

01a1fe68-1f2e-7a0a-a4d5-b893a23892ec

01a1fe68-1f30-7167-9147-7e55911eee2f

01a1fe68-1f31-777a-b02c-42dbb18606ea

硬件层面设计

SOA和微服务:SOA比较粗

互联网主流构成

  • CPU 32 Processor ,每核2个处理器,开启超线程 2.5GHZ

  • 内存 32、64、128

  • 磁盘 SATA机械盘、SAS机械盘、SSD固态硬盘

  • 网卡

    100、1000mbs

机型分类

  • 内存性 128G内存
  • I/O型
  • 存储型
  • 计算型 GPU

服务器型号

01a1fe68-1f34-77e7-bfdf-1f08fcd4ad64

应用场景

Web业务场景

  • 内存型、计算型

逻辑业务场景

  • 计算型

Cache应用

  • 内存型

测试应用

  • 虚拟机

RAID

  • RAID 0

    数据分条,加速读写 01a1fe68-1f37-7259-98da-a40cf43427e8

  • RAID 1 冗余 01a1fe68-1f38-7bf2-bb42-ee14aaa9ea13

  • RAID10

    RAID 0 + RAID 1 01a1fe68-1f3b-77e3-bf29-acb739494797

  • RAID01

    RAID1 + RAID0 01a1fe68-1f3d-7290-b39c-b7157b5d1f8f

  • RAID5 分布式奇偶校验,独立磁盘

    01a1fe68-1f3e-789f-b26a-0412a3f852c4

硬件层面高可用

  • RAID优化

    较大的磁条大小提供较好的读取性能,特别是系统主要进行顺序读取更是如此。DB机器stripe size 都设置成128K,其他机器选择的是64K

  • 读写策略

    foce wb with no battery (不使用电池强制回写)

  • 多机 系统多机冗余

    数据多机冗余

    保证高可用

DNS

DNS域名劫持校验

  1. nslookup 查看address
  2. whois [address] 查看是不是正确域名提供商

DNS欺骗

和劫持类似

DNS解决方案

数据合法性校验

  • 数据是否完整
  • 数据时效

实时监控 + 商务推动

  • 语义监控

绕过自动分配DNS

  • 使用IP地址

  • 使用httpDNS

    解决问题 LocalDNS被劫持 平均访问延迟下降 用户连接失败率下降(智能连接算法) 使用场景

    需要引入SDK 移动客户端

浏览器劫持

  • DNS劫持

  • CDN劫持

  • 网关劫持

  • 网关劫持

    HTTPS、SSL、加密

最佳实践

  • 尽可能选用HttpDNS
  • 基于IP直连
  • 传统DNS监控、及时报警、商务推动

流量被劫持

  • 代理劫持

  • 链路劫持

CDN

全局负载均衡器

局部负载均衡

01a1fe68-1f40-7032-a55f-f6f876b1b8ad

01a1fe68-1f41-7860-9b31-e7a41fb9fa3c

01a1fe68-1f42-7d6d-9b35-2d1231a21606

01a1fe68-1f4d-7718-a1cc-fa8e808f7705

接入层作用

  • 客户端长短连接管理
  • 建立与客户端通信的加密通道
  • 合法性、正确性校验
  • 整合内部少量的连接
  • session管理
  • 初步实施攻防
  • 请求转发到逻辑层

01a1fe68-1f4f-7130-9f7e-21f73d12ce93

逻辑层设计

垂直拆分:根据每个业务一个模块,独立进程

无状态

业务逻辑层不保存任何请求状态、数据,完全对称,负载均衡

异步调用场景

I/O,网络I/O

01a1fe68-1f50-7772-86e6-0e426e44d945

设置合理的超时时间、重试

服务降级

  • 通过队列方式,拒绝低优先服务的
  • 随机丢弃
  • 关闭服务

服务幂等设计

天然幂等 - 消息设置成已读

非幂等 - 增加状态达到幂等

数据存储

多机存储

复制

故障检测

01a1fe68-1f51-7ccd-817c-d81d5e062f01

01a1fe68-1f53-7372-b27e-c115a7afd2e4

01a1fe68-1f54-787f-a7a5-516d4181e2e6

01a1fe68-1f55-7db7-8508-0ca5659ca179

01a1fe68-1f57-7a93-9926-5abec0ad76e8

01a1fe68-1f59-7084-be0c-5b8f37e4cce2

01a1fe68-1f5a-7999-bb22-f7d6f5ceeaaa

01a1fe68-1f5b-7e38-9795-9dd7eef7841c

01a1fe68-1f5d-75f7-b7f1-34fc40af6ea1

01a1fe68-1f60-727c-922e-c78f694a62de

01a1fe68-1f61-77e7-bca4-0f7f0a136729

01a1fe68-1f62-7caa-a2ce-087b7416e5da

01a1fe68-1f64-72f1-a177-a3e894478200

01a1fe68-1f65-781e-8f0b-9409b968e0ef

缓存

加速请求,响应延迟小

减少存储的读写 压力

01a1fe68-1f66-7ef8-b4ba-196bc5037382

01a1fe68-1f68-76a3-b38f-84739c5a2d41

01a1fe68-1f69-7f3a-b9f1-ebfa703e4534

01a1fe68-1f6b-7991-a9da-1495fa5ff9bd

01a1fe68-1f6e-7a8f-8c4d-670d96758c82

01a1fe68-1f70-797d-b8d4-90beb51ebf72

01a1fe68-1f72-7109-b16e-98d2fe476e47

01a1fe68-1f73-78fc-9bfc-d16d9ed0bc17

性能评估

01a1fe68-1f77-769b-9936-3f898b67453e

01a1fe68-1f7b-71a5-a000-30d7a7e177dc

01a1fe68-1f7c-7c67-aaaa-5abc82350f2c

01a1fe68-1f7e-72a7-8018-44ac080de194

01a1fe68-1f7f-7812-a95b-26fc28c87261

01a1fe68-1f82-758d-926f-9522ef54d9a7

01a1fe68-1f84-70a0-835c-a08109e67445

01a1fe68-1f86-7459-847d-170c4df8cb66

01a1fe68-1f88-70c3-9976-065dbb779a59

01a1fe68-1f8a-7052-9bfe-d02db1077b44

01a1fe68-1f8c-757e-9001-9a2b80d074be

01a1fe68-1f8d-7b37-9aa5-51ede6e3b945

01a1fe68-1f8f-73c8-a0c3-de33a9af4b97