美丽说数据库架构变迁.pptxVIP

美丽说数据库架构变迁Web研发—王伟

第21期： 《高性能数据库应用之“美丽说”技术专场》/lampercn

目录一.武功秘籍----向上扩展向外扩展二.很久很久以前----mysql主从架构三.祸起萧墙----按功能分配机器四.泾渭分明----读写分离五.双剑合璧----mysql主从+memcache六.三足鼎立----mysql主从+memcech+redis七.分身有术----按业务分库八.杀手锏----水平分表九.未雨绸缪----异地机房十.他山之石----工具总结十一.真相大白----总结

单击添加标题武功秘籍向上扩展向外扩展

1向上扩展向外扩展向上扩展(ScaleUp)单机硬件升级(扩展极限)增加(或升级)CPU,存储设备升级,增加内存...更换更高端硬件使用小型机和高端存储(上贼船)...向外扩展(ScaleOut)数据切分(Sharding)-分库、分表Hash水平切分,Table垂直切分...数据拷贝复制多份–同步、异步读写分离,多点服务

利用Cache和Search等扩展数据层通过与Cache和Search的协作,增加数据层的扩展性

很久很久以前…mysql主从架构

Appclusterlayer2.1mysql主从架构app1MLB1LoadbalancerSSSMYSQLprotocolwrDBsourcelayerrepl……简单负载均衡器，实现了按权重，随机等基本负载均衡算法数据库主从架构，主库(M)写，所有的数据库（MS）读LB2LBnapp2appn

祸起萧墙按功能分配机器

3.1问题出现

3.1问题出现前后台数据库混用02Sql太慢了！！01

3.2问题解决解决方案表结构优化索引优化查询优化架构优化优化

3.3架构变化MYSQLprotocolDBsourcelayerrepl按功能分配机器后台脚本appserversLoadbalancers前端appserversLoadbalancerswrrMSSSS

问题总结：01从库io问题02从库cpu问题03优化表结构，索引，查询。不要着急加机器，低碳生活从我做起04按功能将数据库分开，提高内存使用率，变相增加内存053.4总结

泾渭分明读写分离

4.1问题出现主库写入慢

4.2架构变化MYSQLprotocolDBsourcelayerrepl数据库读写分离后台脚本appserversLoadbalancers前端appserversLoadbalancerswrrMSSSS

主库cpu问题读写分离问题总结：主库io问题4.3总结

双剑合璧mysql主从+memcache

5.1问题出现从库读压力大！

5.2问题解决解决方案加内存（96G）加缓存（memcache）Mysql配置优化减少从库io操作

5.3架构变化MYSQLprotocolDBsourcelayerread_1/write_3Insertdeleteupdateread_2一致性hash前端appserversMemcachedlayerLoadbalancersMSS给应用添加读cache

增加cache02从库io问题03加内存04问题总结：015.3总结

三足鼎立mysql主从+memcache+redis

6.1问题出现

6.1问题出现主库写入慢从库延迟

6.2问题解决解决方案Memery引擎到cache加写缓存(redis)减少主库io操作

6.3架构变化MYSQLprotocolDBsourcelayerread_1/write_3/writesread_2前端appserversMemcached+redisLoadbalancersMSSmemcache一致性hashredis取模hashwriteswrite给应用添加写cache

问题总结：主库io问题加cache，合并写操作6.4总结

分身有术按业务分库

7.1问题出现问题杂志社上线01写双倍读1.3倍02数据库大小600G

6.2问题解决解决方案按业务分库减少主库io操作

7.3架构变化MYSQLprotocolDBsourcelayerread_1/write_3/writesInsertdeleteupdateread_2一致性hash按模hashwrites业务1业务2前