高性能MySQL第九章 读书笔记
第九章 操作系统和硬件优化
- Mysql服务器性能受制于系统最薄弱的环节,磁盘大小,可用内存,cpu资源网络以及连接他们的组件,都会限制住Mysql的性能。
- mysql中一方面的缺陷常常会将压力施加在另一个系统之上。例如没有内存的时候,可能会刷出缓存来腾出空间,这时候会导致io过高,所以再发现问题的时候,要尽量注意深沉次的问题。
- 低延时收益于更快的cpu,高吞吐收益于更多的cpu。
- mysql还有很多后端工作,那些工作也能受益于多cpu。
- 备库更多需要io而不是cpu,由于主库备份到备库会使串行任务。
- cpu的电源管理技术会根据cpu的压力而动态的改变CPU的时钟速度,但是有突发的短查询,会有一段时间来决定cpu能否应该变化,从而导致查询变慢,性能波动。
- 配置大量内存的最大起因不是由于内存中可以保存大量的数据,而是为了减少io。
- 随机io从缓存中的收益更大。由于顺序io比随机io快,相比之下,随机读写来说,使用内存比使用io快得多。存储引擎中,一个随机读意味着存储引擎必需执行索引操作,通常从b树查找,而连续通常遍历一个简单的数据结构如链表。
- 假如有足够的内存,即可以完全的避免磁盘读取操作,但是写操作是必需的,但是可以推迟写操作,集中解决,减少io。如屡次写入,一次刷新,io合并。这也是预写日志策略的起因,通过连续写来优化随机io。
- 工作集是程序真正使用的数据。MySQL中的工作集包括数据和索引,以缓存单位来计数,一个缓存单位是存储引擎工作的数据最小单位。
- Innodb在默认情况下是16kb,假如要缓存单行数据,事实上,他是缓存了存在该列的页,也就是缓存了16kb的数据。加上索引,可能达到32kb甚至更多。
- 添加内存并不能真正处理所有的问题,有时候需要增强io,比方存在大量写操作。
从传统磁盘读取数据的过程分为3步
- 移动读取磁头到磁盘表面的正确位置上。
- 等待磁盘旋转,所有所需的数据在读取磁头下。
- 等待磁盘旋转过去,读取磁头读取所需数据。
顺序读主要集中在第3步,而随机读主要集中在1,2步。
- 固态存储尽管有更好的随机读写和顺序读写,也更加支持并发,但是也存在缺陷,需要经常GC而且写入前需要擦除操作还会磨损整个块(SLC技术100000个写周期存储小,MLC10000个写周期存储大)。
- 闪存一开始使用特别快,后面会由于垃圾回收而逐步变慢,最后稳固下来。
- 像innodb日志文件这样的顺序写的工作负载,闪存不能提供多少成本和性能优势。
- 假如将mysql的磁盘换成固态,需要调整的配置有:
- 添加io线程数,添加并发。
- 加大日志。
- 禁止预读。
- 配置刷新算法。
- 禁用双写,由于有些闪存设施支持原子写入。保证数据不会出错。
mysql创立了多种类型的文件:
- 数据和索引文件。
- 事务日志文件。
- 二进制日志文件。
- 常规日志。
- 临时文件和临时表。
- 使用多个卷存放这些数据能帮助处理io负载高的问题。但是需要额外的磁盘,成本太高而效果一般。
- 二进制日志和数据文件分离的真正又是可以减少同时丢失数据和日志文件的可能性。
- 假如存储系统能保证足够安全,利用多磁盘建立一个RAID比使用多磁盘要好得多。
- 运行不正常的网络也是主要的性能瓶颈之一。
- 有用的服务器监控工具
- vmstat 注意swap两列应该都是0,说明没有进行内存交换,cpu中的us是cpu使用率。system中的cs是上下文切换次数。不超过100000不担心。procs中的r代表多少进程在等cpu,b多少进程在等io。超过5个需要注意。
- iostat 查看io
- mpstat 查看cpu
说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 高性能MySQL第九章 读书笔记
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 高性能MySQL第九章 读书笔记