淘宝网架构变迁和挑战(Oracle架构师日)
-
Upload
vanadies10 -
Category
Documents
-
view
9.548 -
download
6
description
Transcript of 淘宝网架构变迁和挑战(Oracle架构师日)
![Page 1: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/1.jpg)
淘宝网架构变迁和挑战
![Page 2: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/2.jpg)
About me
姓名 :曾宪杰
花名 :华黎
淘宝 -产品技术 -Java中间件团队
团队博客 http://rdc.taobao.com/team/jm/
Sina 微博 @曾宪杰 _ 华黎
Twitter @vanadies10
![Page 3: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/3.jpg)
内容提要
淘宝网架构的变迁
通用的基础产品
我们面临的挑战
![Page 4: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/4.jpg)
淘宝网的架构变迁
![Page 5: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/5.jpg)
技术里程总览
V1 .0 ( 2003.5 – 2004.5 )
小而快的简单架构
V2.0 ( 2004.2 – 2008.3)
应付业务增长的层次化结构
开始有自己开发的软件技术
V3 ( 2007.10-2009.11 )
产品化的思维
做深,做精
服务导向的框架
应付多样化的业务
V4 ( 2009.8 -)
系统化
智能化
专业化
![Page 6: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/6.jpg)
V1 .0 :小而快 2003.5 – 2004.5
![Page 7: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/7.jpg)
简介
2003年非典时期
使用 LAMP架构( Linux, Apache, MySql, Php)
业界流行的免费开源组合
使用改造过的一个商业软件
phpAuction,以拍卖为主
简单的库表结构
用户,交易,列表,其他
简单的结构,但符合当时需求
![Page 8: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/8.jpg)
V2.0 :多层次结构,开始做自己的软件 2004.2 – 2008.3
![Page 9: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/9.jpg)
需求 业务发展快速
“ ”需要 较高性能的架构(百万至千万用户级的架构)
团队并行开发
开始有小团队(几十人)做开发,开发效率必需考虑
系统的可伸缩
容易的扩容,增加机器
![Page 10: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/10.jpg)
简介 应用中间件软件由 weblogic迁移至 jboss
支持分库的数据访问框架
自主的淘宝分布式文件系统, TFS
自主的搜索引擎, iSearch
自主的缓存系统, TD BM
Taobao自己的 CD N
CD N ( Content D elivery Network),增进性能 因应业务的增多,用户的激增,架构也日趋多层化
业务流程处理
数据持久层
业务逻辑层BO
BO
BO
BO
BOBO BO
BO
BO
AOAOAOAO AOAO
UC UC UC UCUCUC
DAODAO DAODAO
DAO
表示层-WEBX
业务请求转发
数据 数据 数据 数据
采用SPRING作为统一的框
架
![Page 11: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/11.jpg)
问题 I
上百人维护一个代码百万行的核心工程
共享一个代码模块, D enali(虽然部署是分离的)
多个业务系统中的超过 1 /3的核心代码重复编写
代码复杂难维护V2
单一代码模块的设
计(
Den
ali
)
![Page 12: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/12.jpg)
问题 I I
所有系统都要关心数据拆分规则
不必要的设计
数据库连接达到上限 (每个 Oracle数据库大约提供 5000个链接)
连接池是有限的资源
Oracle数据库
太多的应用机器有限的链接池
需要数据库连接
![Page 13: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/13.jpg)
V3.0 :产品化思维及服务导向框架 2007.10-2009.1 1
![Page 14: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/14.jpg)
需求 支撑大型团队,丰富业务的并行开发
软件模组化,中心化(用户,交易,商品,店铺,评价等),走向鬆耦合
基础软件产品化独立团队开发,做深,做大
从盖独立别墅到建造高楼大厦!
支撑高速的业务增长 快速扩容 (几十亿 PV,几千亿 GMV,几万台机器)
提高可用性及管理性 走向 Always Available
对外开放
![Page 15: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/15.jpg)
结构 数据和应用透明伸缩
非核心数据从 Oracle迁移 MySQ L
消息系统
服务框架和服务化
淘宝开放平台( TOP)
运营支撑平台( TBoss)
鬆耦合,服务导向的架构
![Page 16: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/16.jpg)
V4.0 :系统化、智能化、专业化 2009.8-
![Page 17: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/17.jpg)
现状 系统化
把知识经验通过系统、平台进行沉淀,而不是总是人肉重复
智能化 从提供开关人工处理到系统自主决策
专业化 业务平台、技术平台的深耕
稳定性、性能的深入发展
![Page 18: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/18.jpg)
技术里程回顾
V1 .0 ( 2003.5 – 2004.5 )
小而快的简单架构
V2.0 ( 2004.2 – 2008.3)
应付业务增长的层次化结构
开始有自己开发的软件技术
V3 ( 2007.10-2009.11 )
产品化的思维
做深,做精
服务导向的框架
应付多样化的业务
V4 ( 2009.8 -)
系统化
智能化
专业化
![Page 19: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/19.jpg)
通用的基础产品
![Page 20: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/20.jpg)
计算机硬件结构图
外存
内存
运 算
器
控 制
器
输入设备
输出设备
数据、程序
CPU
主机
数据、程序 数据、程序
冯 .诺依曼型计算机
计算机组成
![Page 21: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/21.jpg)
计算机系统的本质
数据处理
数据存储
数据访问
![Page 22: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/22.jpg)
网站结构示意图
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 23: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/23.jpg)
Web框架
Webx
在阿里内部广泛使用的 MVC框架
Turbine风格
有很好的层次化、模块化,并且高度可扩展
基于Webx的无线应用自适应框架
Velocity的编译优化
![Page 24: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/24.jpg)
中间件
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 25: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/25.jpg)
服务框架
服务发布
服务查询
服务调用
服务治理
![Page 26: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/26.jpg)
服务框架
07年淘宝开始走向服务化
08年初有多种 RPC的方式
基于 SOCKET ,有多种不同实现
使用上不透明,成本高
![Page 27: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/27.jpg)
服务框架
简单透明 (提供服务和使用服务 )
支持软负载
灵活可控,方便扩展
稳定性支持
![Page 28: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/28.jpg)
服务框架
调用者 服务提供者
调用者 服务提供者
服务注册查找中心
![Page 29: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/29.jpg)
中间件
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 30: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/30.jpg)
消息中间件
• Message-oriented middleware (MOM) is software infrastructure focused on sending and receiving messages
between distributed systems.
--- from wikipedia.org
• MOM 的优点– 松耦合– 异步处理
![Page 31: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/31.jpg)
消息中间件
传统方式 使用消息中间件方式
![Page 32: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/32.jpg)
消息中间件
业务系统完成一件事情后,需要其他系统进行处理的,通过定时程序来驱动
业务系统D o something
业务 D B
定时程序获取任务D o action
![Page 33: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/33.jpg)
消息中间件
Notify是一个高性能、可靠、可扩展、可与发送端业务逻辑相结合、支持订阅
者集群的消息中间件。
互联网时代的消息中间件
支持最终一致
消息可靠
支持订阅者集群
![Page 34: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/34.jpg)
中间件
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 35: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/35.jpg)
数据层
![Page 36: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/36.jpg)
数据层
User
User1
User2
User1 -M
User2-M User2-S
User1 -S分库分表 读写分离
数据库架构的演进
![Page 37: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/37.jpg)
数据层
User1 -M
User2-M User2-S
User1 -S
TAtomD ataSource
TGroupD ataSource
TD ataSource
数据源的三层重构
业务可以灵活选择
![Page 38: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/38.jpg)
数据层
SQ L解析,路由规则,数据合并
Client-> D B 和 Client-> Server-> D B 模式
非对称数据复制
三层的数据源结构
![Page 39: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/39.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 40: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/40.jpg)
分布式缓存
Tair
Redis
![Page 41: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/41.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 42: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/42.jpg)
分布式存储
TFS
OceanBase
Hbase
基于 BD B 的分布式存储
![Page 43: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/43.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 44: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/44.jpg)
搜索系统
iSearch
基于 Solr、 Lucene的搜索系统
![Page 45: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/45.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 46: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/46.jpg)
Hadoop
总容量 25.35PB, 利用率 55.2%
总共 1400+ 台机器
Master: 8CPU(HT), 96GB 内存, SAS Raid
Slave节点异构
8CPU/8CPU(HT)
16G/24G内存
1T x 1 2 / 2T x 6 / 1T x 6 SATA JBOD
1 2/20 slots
约 40000道作业 /天 , 扫描数据:约 1 .7PB/天
用户数 474人 , 用户组 38个
![Page 47: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/47.jpg)
FourI nOne
简化版的实现
方便部署、维护和管理
Master
Worker
Worker
Worker
![Page 48: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/48.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 49: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/49.jpg)
CSP业务架构
49
![Page 50: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/50.jpg)
逻辑单元逻辑单元逻辑单元 逻辑单元 逻辑单元
CSP
收集分析器
db
应用系统
收集分析器
db
收集分析器
db
收集分析器
db
收集分析器
db
控制服务中心
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
应用系统
![Page 51: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/51.jpg)
CSP的一些数据
平台化
1 5台机器, 1 5个库
APP采用了逻辑单元的概念 (隔离 )
采用 1 5个逻辑单元对超过 200多个系统进行监控
每日数据超过 5000万
24个系统进行容量规划
10个系统进行依赖关系
6个系统完成统一的保护开关部署
51
![Page 52: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/52.jpg)
52
哈勃系统架构
配置中心
Agent Agent Agent Agent Agent Agent Agent采集层
分析服务器(slave)
分析服务器(slave)
分析服务器(slave)
分析层
分析服务器
(Master)
…
…
应用层
Mysql 配置库
cassandra 数据库集群
对外接口 数据展现
报警系
统
“ ” “ ” “整个系统分为 采集, 分析报警和 应用 (展现 )” “三个层次,实现了 采” “ ” “ ” “ ” “ ”集, 分析, 报警, 存储和 展示五大功能。
![Page 53: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/53.jpg)
系统特点 超轻量级 HubAgent:
HubAgent是一个基于插件模式轻量级 HTTP服务,可以通过增加插件的方式进行扩展,目前已
“ ” “ ” “提供 增量日志获取, 外部程序(脚本)调用, 进程 & ” “ ”线程探测, 端口探测等多种服务。
系统使用 Python开发,不依赖第三方系统,可以安装在任何 linux服务器上。
分布式的分析系统: .
分析系统使用 MapReduce的编程模型,对大量的监控数据进行并行处理。系统将采用松耦合的
Master-Slave模式, Master处于被动状态,只负责任务的生成和合并,不需要关心任务分派。系
统设计更加简单、灵活,通过增加 Slave即可得到水平扩展能力。
Cassandra数据存储: 系统使用 Cassandra来实现大量监控数据的分布式存储, Cassandra具有模式灵活,扩展性强,具
“ ” “有多维数据结构,支持范围查询等特点。而它 写入快,读取慢的特性也恰好符合监控系统 写
”多读少的特点,非常适合做监控数据的存储系统。
53
![Page 54: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/54.jpg)
哈勃运行状况
应用情况 目前以接入包括主站和广告在内的 339 应用,配置了超过 1 500个任务和 3000多张监控报表。能为应用的集群指标提供 30天的明细数据,单机提供 7天的明细数据;每小时的统计数据保存 1 年和每天的统计数据永久保存。
系统情况: HubAgent已经安装超过 3500台,基本覆盖了主站的应用服务器。
目前有 1 台 Master服务器和 7台 Slave 服务器用于数据分析。 master的流量在5Mbps, Slave合计的平均网络流量 60Mbps(峰值 1 20Mbps),平均每天处理约 4T 的原始数据。
目前有 5台 Cassandra服务器, 350G左右的数据存储量,每天的数据增量在 25G左右;保存了超过 18万个监控指标。
54
![Page 55: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/55.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 56: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/56.jpg)
运维平台
部署
发布
监控
管理
56
![Page 57: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/57.jpg)
LoadBalancer
WebApp WebApp
Service Service
Cache
分布式存储
搜索
消息中间件
服务框架CD N
数据层
D B
数据层
并行计算平台
D B D B(S) D B(S)
监控运维平台
![Page 58: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/58.jpg)
我们面临的挑战
![Page 59: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/59.jpg)
面临的挑战
![Page 60: 淘宝网架构变迁和挑战(Oracle架构师日)](https://reader034.fdocuments.net/reader034/viewer/2022050922/5598fed61a28ab69428b4575/html5/thumbnails/60.jpg)
Thanks !