如何解决磁盘I/O使用过高问题

2020-12-03  本文已影响0人  liuliuzo

案例

在访问商品搜索接口时,发现了接口的响应特别慢。通过对系统 CPU、内存和磁盘 I/O 等资源使用情况的分析,发现这时出现了磁盘的 I/O 瓶颈。

接着,借助 pidstat,发现罪魁祸首是 mysqld 进程。又通过 strace、lsof,找出了 mysqld 正在读的文件。根据文件的名字和路径,找出了 mysqld 正在操作的数据库和数据表。综合这些信息,猜测这是一个没利用索引导致的慢查询问题。

为了验证猜测,到 MySQL 命令行终端,使用数据库分析工具发现,案例应用访问的字段果然没有索引。既然猜测是正确的,那增加索引后,问题就自然解决了。

应用程序优化思路

应用程序处于整个 I/O 栈的最上端,它可以通过系统调用,来调整 I/O 模式(如顺序还是随机、同步还是异步), 同时,它也是 I/O 数据的最终来源。可以有这么几种方式来优化应用程序的 I/O 性能。

磁盘优化思路

数据的持久化存储,最终还是要落到具体的物理磁盘中,同时,磁盘也是整个 I/O 栈的最底层。从磁盘角度出发,自然也有很多有效的性能优化方法。

总结

MySQL 的 MyISAM 引擎,主要依赖系统缓存加速磁盘 I/O 的访问。可如果系统中还有其他应用同时运行, MyISAM 引擎很难充分利用系统缓存。缓存可能会被其他应用程序占用,甚至被清理掉。所以,一般并不建议,把应用程序的性能优化完全建立在系统缓存上。最好能在应用程序的内部分配内存,构建完全自主控制的缓存;或者使用第三方的缓存应用,比如 Memcached、Redis 等。

发现 I/O 性能问题后,不要急于动手优化,而要先找出最重要的、可以最大程度提升性能的问题,然后再从 I/O 栈的不同层入手,考虑具体的优化方法。记住,磁盘和文件系统的 I/O ,通常是整个系统中最慢的一个模块。所以,在优化 I/O 问题时,除了可以优化 I/O 的执行流程,还可以借助更快的内存、网络、CPU 等,减少 I/O 调用。比如,可以充分利用系统提供的 Buffer、Cache ,或是应用程序内部缓存, 再或者 Redis 这类的外部缓存系统。

文章参考自:磁盘 I/O 性能优化的几个思路

上一篇 下一篇

猜你喜欢

热点阅读