深圳网站设计公司哪家工艺好,网站用视频做背景,最好看免费中文,宿州公司做网站关于 MySQL 调优 有 3 种方法可以加快 MySQL 服务器的运行速度#xff0c;效率从低到高依次为#xff1a; 替换有问题的硬件。对 MySQL 进程的设置进行调优。对查询进行优化。迁移到 DB2? 您正在寻找一种干净利落、无成本的方法用来从 MySQL 迁移到 IBM? DB2? 吗#xf… 关于 MySQL 调优 有 3 种方法可以加快 MySQL 服务器的运行速度效率从低到高依次为 替换有问题的硬件。对 MySQL 进程的设置进行调优。对查询进行优化。 迁移到 DB2? 您正在寻找一种干净利落、无成本的方法用来从 MySQL 迁移到 IBM? DB2? 吗“从 MySQL 或 PostgreSQL 迁移到 DB2 Express-C” 介绍了如何使用文中提供的迁移工具来简单地实现这种转换。可以 下载 免费的 DB2 Express-C 并开始体验。替换有问题的硬件通常是我们的第一考虑主要原因是数据库会占用大量资源。不过这种解决方案也就仅限于此了。实际上您通常可以让中央处理器CPU或磁盘速度加倍也可以让内存增大 4 到 8 倍。 第二种方法是对 MySQL 服务器也称为 demysqldde进行调优。对这个进程进行调优意味着适当地分配内存并让 demysqldde 了解将会承受何种类型的负载。加快磁盘运行速度不如减少所需的磁盘访问次数。类似地确保 MySQL 进程正确操作就意味着它花费在服务查询上的时间要多于花费在处理后台任务如处理临时磁盘表或打开和关闭文件上的时间。对 demysqldde 进行调优是本文的重点。 最好的方法是确保查询已经进行了优化。这意味着对表应用了适当的索引查询是按照可以充分利用 MySQL 功能的方式来编写的。尽管本文并没有包含查询调优方面的内容很多著作中已经针对这个主题进行了探讨不过它会配置 demysqldde 来报告可能需要进行调优的查询。 虽然已经为这些任务指派了次序但是仍然要注意硬件和 demysqldde 的设置以利于适当地调优查询。机器速度慢也就罢了我曾经见过速度很快的机器在运行设计良好的查询时由于负载过重而失败因为 demysqldde 被大量繁忙的工作所占用而不能服务查询。 回页首记录慢速查询 在一个 SQL 服务器中数据表都是保存在磁盘上的。索引为服务器提供了一种在表中查找特定数据行的方法而不用搜索整个表。当必须要搜索整个表时就称为表扫描。通常来说您可能只希望获得表中数据的一个子集因此全表扫描会浪费大量的磁盘 I/O因此也就会浪费大量时间。当必须对数据进行连接时这个问题就更加复杂了因为必须要对连接两端的多行数据进行比较。 当 然表扫描并不总是会带来问题有时读取整个表反而会比从中挑选出一部分数据更加有效服务器进程中查询规划器用来作出这些决定。如果索引的使用效率很 低或者根本就不能使用索引则会减慢查询速度而且随着服务器上的负载和表大小的增加这个问题会变得更加显著。执行时间超过给定时间范围的查询就称为慢速查询。 您可以配置 demysqldde 将这些慢速查询记录到适当命名的慢速查询日志中。管理员然后会查看这个日志来帮助他们确定应用程序中有哪些部分需要进一步调查。清单 1 给出了要启用慢速查询日志需要在 my.cnf 中所做的配置。 清单 1. 启用 MySQL 慢速查询日志 [mysqld]; enable the slow query log, default 10 secondslog-slow-queries; log queries taking longer than 5 secondslong_query_time 5; log queries that dont use indexes even if they take less than long_query_time; MySQL 4.1 and newer onlylog-queries-not-using-indexes 这三个设置一起使用可以记录执行时间超过 5 秒和没有使用索引的查询。请注意有关 delog-queries-not-using-indexesde 的警告您必须使用 MySQL 4.1 或更高版本。慢速查询日志都保存在 MySQL 数据目录中名为 hostname-slow.log。如果希望使用一个不同的名字或路径可以在 my.cnf 中使用 delog-slow-queries /new/path/to/filede 实现此目的。 阅读慢速查询日志最好是通过 demysqldumpslowde 命令进行。指定日志文件的路径就可以看到一个慢速查询的排序后的列表并且还显示了它们在日志文件中出现的次数。一个非常有用的特性是 demysqldumpslowde 在比较结果之前会删除任何用户指定的数据因此对同一个查询的不同调用被计为一次这可以帮助找出需要工作量最多的查询。 回页首对查询进行缓存 很多 LAMP 应用程序都严重依赖于数据库但却会反复执行相同的查询。每次执行查询时数据库都必须要执行相同的工作 —— 对查询进行分析确定如何执行查询从磁盘中加载信息然后将结果返回给客户机。MySQL 有一个特性称为查询缓存它将后面会用到的查询结果保存在内存中。在很多情况下这会极大地提高性能。不过问题是查询缓存在默认情况下是禁用的。 将 dequery_cache_size 32Mde 添加到 /etc/my.conf 中可以启用 32MB 的查询缓存。 监视查询缓存 在启用查询缓存之后重要的是要理解它是否得到了有效的使用。MySQL 有几个可以查看的变量可以用来了解缓存中的情况。清单 2 给出了缓存的状态。 清单 2. 显示查询缓存的统计信息 mysql SHOW STATUS LIKE qcache%;-------------------------------------| Variable_name | Value |-------------------------------------| Qcache_free_blocks | 5216 || Qcache_free_memory | 14640664 || Qcache_hits | 2581646882 || Qcache_inserts | 360210964 || Qcache_lowmem_prunes | 281680433 || Qcache_not_cached | 79740667 || Qcache_queries_in_cache | 16927 || Qcache_total_blocks | 47042 |-------------------------------------8 rows in set (0.00 sec) 这些项的解释如表 1 所示。 表 1. MySQL 查询缓存变量变量名说明deQcache_free_blocksde缓存中相邻内存块的个数。数目大说明可能有碎片。deFLUSH QUERY CACHEde 会对缓存中的碎片进行整理从而得到一个空闲块。deQcache_free_memoryde缓存中的空闲内存。deQcache_hitsde每次查询在缓存中命中时就增大。deQcache_insertsde每次插入一个查询时就增大。命中次数除以插入次数就是不中比率用 1 减去这个值就是命中率。在上面这个例子中大约有 87% 的查询都在缓存中命中。deQcache_lowmem_prunesde缓存出现内存不足并且必须要进行清理以便为更多查询提供空间的次数。这个数字最好长时间来看如果这个数字在不断增长就表示可能碎片非常严重或者内存很少。上面的 defree_blocksde 和 defree_memoryde 可以告诉您属于哪种情况。deQcache_not_cachedde不适合进行缓存的查询的数量通常是由于这些查询不是 deSELECTde 语句。deQcache_queries_in_cachede当前缓存的查询和响应的数量。deQcache_total_blocksde缓存中块的数量。通常间隔几秒显示这些变量就可以看出区别这可以帮助确定缓存是否正在有效地使用。运行 deFLUSH STATUSde 可以重置一些计数器如果服务器已经运行了一段时间这会非常有帮助。 使用非常大的查询缓存期望可以缓存所有东西这种想法非常诱人。由于 demysqldde 必须要对缓存进行维护例如当内存变得很低时执行剪除因此服务器可能会在试图管理缓存时而陷入困境。作为一条规则如果 deFLUSH QUERY CACHEde 占用了很长时间那就说明缓存太大了。 回页首强制限制 您可以在 demysqldde 中强制一些限制来确保系统负载不会导致资源耗尽的情况出现。清单 3 给出了 my.cnf 中与资源有关的一些重要设置。 清单 3. MySQL 资源设置 set-variablemax_connections500set-variablewait_timeout10max_connect_errors 100 连接最大个数是在第一行中进行管理的。与 Apache 中的 deMaxClientsde 类似其想法是确保只建立服务允许数目的连接。要确定服务器上目前建立过的最大连接数请执行 deSHOW STATUS LIKE max_used_connectionsde。 第 2 行告诉 demysqldde 终止所有空闲时间超过 10 秒的连接。在 LAMP 应用程序中连接数据库的时间通常就是 Web 服务器处理请求所花费的时间。有时候如果负载过重连接会挂起并且会占用连接表空间。如果有多个交互用户或使用了到数据库的持久连接那么将这个值设 低一点并不可取 最后一行是一个安全的方法。如果一个主机在连接到服务器时有问题并重试很多次后放弃那么这个主机就会被锁定直到 deFLUSH HOSTSde 之后才能运行。默认情况下10 次失败就足以导致锁定了。将这个值修改为 100 会给服务器足够的时间来从问题中恢复。如果重试 100 次都无法建立连接那么使用再高的值也不会有太多帮助可能它根本就无法连接。 回页首缓冲区和缓存 MySQL 支持超过 100 个的可调节设置但是幸运的是掌握少数几个就可以满足大部分需要。查找这些设置的正确值可以通过 deSHOW STATUSde 命令查看状态变量从中可以确定 demysqldde 的运作情况是否符合我们的预期。给缓冲区和缓存分配的内存不能超过系统中的现有内存因此调优通常都需要进行一些妥协。 MySQL 可调节设置可以应用于整个 demysqldde 进程也可以应用于单个客户机会话。 服务器端的设置 每个表都可以表示为磁盘上的一个文件必须先打开后读取。为了加快从文件中读取数据的过程demysqldde 对这些打开文件进行了缓存其最大数目由 /etc/mysqld.conf 中的 detable_cachede 指定。清单 4 给出了显示与打开表有关的活动的方式。 清单 4. 显示打开表的活动 mysql SHOW STATUS LIKE open%tables;----------------------| Variable_name | Value |----------------------| Open_tables | 5000 || Opened_tables | 195 |----------------------2 rows in set (0.00 sec) 清单 4 说明目前有 5,000 个表是打开的有 195 个表需要打开因为现在缓存中已经没有可用文件描述符了由于统计信息在前面已经清除了因此可能会存在 5,000 个打开表中只有 195 个打开记录的情况。如果 deOpened_tablesde 随着重新运行 deSHOW STATUSde 命令快速增加就说明缓存命中率不够。如果 deOpen_tablesde 比 detable_cachede 设置小很多就说明该值太大了不过有空间可以增长总不是什么坏事。例如使用 detable_cache 5000de 可以调整表的缓存。 与表的缓存类似对于线程来说也有一个缓存。 demysqldde 在接收连接时会根据需要生成线程。在一个连接变化很快的繁忙服务器上对线程进行缓存便于以后使用可以加快最初的连接。 清单 5 显示如何确定是否缓存了足够的线程。 清单 5. 显示线程使用统计信息 mysql SHOW STATUS LIKE threads%;---------------------------| Variable_name | Value |---------------------------| Threads_cached | 27 || Threads_connected | 15 || Threads_created | 838610 || Threads_running | 3 |---------------------------4 rows in set (0.00 sec) 此处重要的值是 deThreads_createdde每次 demysqldde 需要创建一个新线程时这个值都会增加。如果这个数字在连续执行 deSHOW STATUSde 命令时快速增加就应该尝试增大线程缓存。例如可以在 my.cnf 中使用 dethread_cache 40de 来实现此目的。 关键字缓冲区保存了 MyISAM 表的索引块。理想情况下对于这些块的请求应该来自于内存而不是来自于磁盘。清单 6 显示了如何确定有多少块是从磁盘中读取的以及有多少块是从内存中读取的。 清单 6. 确定关键字效率 mysql show status like %key_read%;------------------------------| Variable_name | Value |------------------------------| Key_read_requests | 163554268 || Key_reads | 98247 |------------------------------2 rows in set (0.00 sec) deKey_readsde 代表命中磁盘的请求个数 deKey_read_requestsde 是总数。命中磁盘的读请求数除以读请求总数就是不中比率 —— 在本例中每 1,000 个请求大约有 0.6 个没有命中内存。如果每 1,000 个请求中命中磁盘的数目超过 1 个就应该考虑增大关键字缓冲区了。例如dekey_buffer 384Mde 会将缓冲区设置为 384MB。 临时表可以在更高级的查询中使用其中数据在进一步进行处理例如 deGROUP BYde 字句之前都必须先保存到临时表中理想情况下在内存中创建临时表。但是如果临时表变得太大就需要写入磁盘中。清单 7 给出了与临时表创建有关的统计信息。 清单 7. 确定临时表的使用 mysql SHOW STATUS LIKE created_tmp%;--------------------------------| Variable_name | Value |--------------------------------| Created_tmp_disk_tables | 30660 || Created_tmp_files | 2 || Created_tmp_tables | 32912 |--------------------------------3 rows in set (0.00 sec) 每次使用临时表都会增大 deCreated_tmp_tablesde基于磁盘的表也会增大 deCreated_tmp_disk_tablesde。对于这个比率并没有什么严格的规则因为这依赖于所涉及的查询。长时间观察 deCreated_tmp_disk_tablesde 会显示所创建的磁盘表的比率您可以确定设置的效率。 detmp_table_sizede 和 demax_heap_table_sizede 都可以控制临时表的最大大小因此请确保在 my.cnf 中对这两个值都进行了设置。 每个会话的设置 下面这些设置针对于每个会话。在设置这些数字时要十分谨慎因为它们在乘以可能存在的连接数时候这些选项表示大量的内存您可以通过代码修改会话中的这些数字或者在 my.cnf 中为所有会话修改这些设置。 当 MySQL 必须要进行排序时就会在从磁盘上读取数据时分配一个排序缓冲区来存放这些数据行。如果要排序的数据太大那么数据就必须保存到磁盘上的临时文件中并再次进行排序。如果 desort_merge_passesde 状态变量很大这就指示了磁盘的活动情况。清单 8 给出了一些与排序相关的状态计数器信息。 清单 8. 显示排序统计信息 mysql SHOW STATUS LIKE sort%;----------------------------| Variable_name | Value |----------------------------| Sort_merge_passes | 1 || Sort_range | 79192 || Sort_rows | 2066532 || Sort_scan | 44006 |----------------------------4 rows in set (0.00 sec) 如果 desort_merge_passesde 很大就表示需要注意 desort_buffer_sizede。例如 desort_buffer_size 4Mde 将排序缓冲区设置为 4MB。 MySQL 也会分配一些内存来读取表。理想情况下索引提供了足够多的信息可以只读入所需要的行但是有时候查询设计不佳或数据本性使然需要读取表中大量数据。要理解这种行为需要知道运行了多少个 deSELECTde 语句以及需要读取表中的下一行数据的次数而不是通过索引直接访问。实现这种功能的命令如清单 9 所示。 清单 9. 确定表扫描比率 mysql SHOW STATUS LIKE com_select;-----------------------| Variable_name | Value |-----------------------| Com_select | 318243 |-----------------------1 row in set (0.00 sec)mysql SHOW STATUS LIKE handler_read_rnd_next;----------------------------------| Variable_name | Value |----------------------------------| Handler_read_rnd_next | 165959471 |----------------------------------1 row in set (0.00 sec) deHandler_read_rnd_nextde / deCom_selectde 得出了表扫描比率 —— 在本例中是 521:1。如果该值超过 4000就应该查看 deread_buffer_sizede例如 deread_buffer_size 4Mde。如果这个数字超过了 8M就应该与开发人员讨论一下对这些查询进行调优了 回页首3 个必不可少的工具 尽管在了解具体设置时deSHOW STATUSde 命令会非常有用但是您还需要一些工具来解释 demysqldde 所提供的大量数据。我发现有 3 个工具是必不可少的在 参考资料 一节中您可以找到相应的链接。 大部分系统管理员都非常熟悉 detopde 命令它为任务所消耗的 CPU 和内存提供了一个不断更新的视图。 demytopde 对 detopde 进行了仿真它为所有连接上的客户机以及它们正在运行的查询提供了一个视图。demytopde 还提供了一个有关关键字缓冲区和查询缓存效率的实时数据和历史数据以及有关正在运行的查询的统计信息。这是一个很有用的工具可以查看系统中比如 10 秒钟之内的状况您可以获得有关服务器健康信息的视图并显示导致问题的任何连接。 demysqlardde 是一个连接到 MySQL 服务器上的守护程序负责每 5 分钟搜集一次数据并将它们存储到后台的一个 Round Robin Database 中。有一个 Web 页面会显示这些数据例如表缓存的使用情况、关键字效率、连接上的客户机以及临时表的使用情况。尽管 demytopde 提供了服务器健康信息的快照但是 demysqlardde 则提供了长期的健康信息。作为奖励demysqlardde 使用自己搜集到的一些信息针对如何对服务器进行调优给出一些建议。 搜集 deSHOW STATUSde 信息的另外一个工具是 demysqlreportde。其报告要远比 demysqlardde 更加复杂因为需要对服务器的每个方面都进行分析。这是对服务器进行调优的一个非常好的工具因为它对状态变量进行适当计算来帮助确定需要修正哪些问题。 回页首结束语 本 文介绍了对 MySQL 进行调优的一些基础知识并对这个针对 LAMP 组件进行调优的 3 部分系列文章进行了总结。调优很大程度上需要理解组件的工作原理确定它们是否正常工作进行一些调整并重新评测。每个组件 —— Linux、Apache、PHP 或 MySQL —— 都有各种各样的需求。分别理解各个组件可以帮助减少可能会导致应用程序速度变慢的瓶颈。 参考资料 学习您可以参阅本文在 developerWorks 全球站点上的 英文原文。“从 MySQL 或 PostgreSQL 迁移到 DB2 Express-C”developerWorks2006 年 6 月提供了一种从 MySQL 迁移到 DB2 Express-C 上的简单方法。IBM 还为那些希望迁移到 DB2 Express-C 上的 MySQL 管理员提供了帮助请参阅“利用 MySQL 技能学习 DB2 Express: DB2 与 MySQL 的管理任务和基本任务”developerWorks2006 年 2 月以及本系列文章的其他部分。“在联邦数据库环境中使用 MySQL ”developerWorks2004 年 12 月是有关从 WebSphere 中访问存储在 MySQL 中的数据的教程。IBM 确保 WebSphere? 软件可以很好地与 MySQL 结合使用。SHOW VARIABLES 和 SHOW STATUS 在 MySQL 文档中都已经很好地进行了定义。如果喜欢 blogsMySQL Performance Blog、 Xaprb 以及 MySQL DBA 都非常值得阅读。在 developerWorks 上 Architecture 专区 中可以找到提高架构设计领域方面技能所需要的一些资源。开发正确的架构是扩展 LAMP 应用程序的关键。在 developerWorks Linux 专区 中可找到适合于 Linux 开发人员的更多资源包括 Linux 教程 以及上月 读者最喜欢的 Linux 文章和教程。随时关注 developerWorks 技术事件和网络广播。获得产品和技术尽管已经出版了 3 年之久了 High Performance MySQL 仍然是非常有价值的一本书。作者也有一个 Web 站点介绍 有关 MySQL 的各种文章。mytop 告诉您目前 MySQL 服务器上都在进行什么操作并提供一些关键的统计信息。在发现数据库有问题时应该首先求助于这个程序。mysqlard 会给出 MySQL 服务器一个关键性能指示器的图形表示并给出一些调优建议。mysqlreport 是一个必须的工具。它为您分析 deSHOW STATUSde 变量。MySQL 文章如果没有提供到 phpMyAdmin 的链接就说不上完整。尽管已经给出了对状态变量的一些解释但是这个产品的强大之处在于如何简化管理任务。定购 SEK for Linux共包含两张 DVD其中有用于 Linux 的最新 IBM 试用软件包括 DB2?、Lotus?、Rational?、Tivoli? 和 WebSphere?。利用可直接从 developerWorks 下载的 IBM 试用软件 在 Linux 上构建您的下一个开发项目。 转载于:https://www.cnblogs.com/silvester/archive/2008/09/19/1694713.html
