严格PDQ的使用评估——Informix数据库性能优化（8）

字数 1479阅读 3797评论 0赞 0

<div><embed id="lingoes_plugin_object" type="application/lingoes-npruntime-capture-word-plugin" hidden="true" width="0" height="0"><span style="background-color: rgb(255, 255, 255); font-family: Consolas, 'Courier New', Courier, mono; font-size: 12px; line-height: 21px; ">声明：本文章版权为作者cdcd007所有。由于作者工作经验及知识结构所限，文章难免有疏漏之处，欢迎讨论并恳请指正。联系方式：chendong00000#163.com(请将#号替换为@符号)。  </span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Consolas, 'Courier New', Courier, mono; font-size: 12px; line-height: 21px; "><br></span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Consolas, 'Courier New', Courier, mono; font-size: 12px; line-height: 21px; ">PDQ是</span><span style="color: rgb(34, 34, 34); font-family: arial, sans-serif; line-height: 16px; background-color: rgb(255, 255, 255); font-size: small; ">并行数据库查询（Parallel Database Qu</span><span style="font-family: arial, sans-serif; line-height: 16px; background-color: rgb(255, 255, 255); font-size: small; ">er</span><span style="font-family: arial, sans-serif; line-height: 16px; background-color: rgb(255, 255, 255); font-size: small; ">y）的简称，Informix从7.3版本开始引入PDQ特性，在使用得当的情况下，此特性可以极大地提高数据库性能。然而，更多的情况是使用不当，导致数据库出现严重的性能问题。</span></div><div><span style="font-family: arial, sans-serif; line-height: 16px; background-color: rgb(255, 255, 255); font-size: small; "><br></span></div><div><span style="font-family: arial, sans-serif; line-height: 16px; background-color: rgb(255, 255, 255); font-size: small; ">数据库配置参数</span><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">MAX_PDQPRIORITY</span><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "> 用于设置数据库服务器端所有PDQ查询可以使用的资源的百分比。资源的范围包括：阵列（磁盘）I/O、内存、CPU虚处理器以及扫描线程。</span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "><br></span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">在既有OLTP应用，又有DSS或者OLAP应用的数据库上，应当将此参数设置为20-30以保留大部分资源用于对响应时间更加敏感的OLTP应用。在完全的OLTP系统上，此值应限制得更小，甚至应该完全关闭PDQ特性。</span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "><br></span></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">环境变量或者会话环境PDQPRIORITY用于设置单个客户端可使用的总PDQ资源的百分比。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">例如，配置</span></font><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">MAX_PDQPRIORITY</span><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "> 为50，应用程序设置PDQPRIORITY为50，则含义为：PDQ可以使用的数据库总资源为50%，应用程序可以使用MAX_PDQPRIORITY规定的资源的50%，即应用程序最多可以使用数据库总资源的25%。</span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "><br></span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">可以使用以下方式设置PDQPRIORITY参数：</span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">使用set pdqpriority 命令在会话中设置；</span></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">使用export PDQPRIORITY=xx的方式（或者setenv）在当前用户环境变量中设置。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">在有分片表（fragment table或者也叫partition table）的数据库环境中，使用PDQ特性时，应当注意使用配置参数</span></font><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">DS_MAX_SCANS防止表并行扫描线索可能对数据库OLTP性能带来的冲击。</span></div><div><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">DS_MAX_SCANS配置参数用于配置数据库可启动的最大表扫描线索数量。同时也在一定程度上限制单个会话对单张分片表可启动的最大表扫描线索数量。</span></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">单个会话访问分片表时启动的并行扫描线索数量同</span></font><span style="line-height: normal; font-family: Arial, sans-serif; font-size: small; ">表分片数、DS_MAX_SCANS、MAX_PDQPRIORITY和PDQPRIORITY共同决定，具体计算方法为：</span></div><div><span style="line-height: normal; "><font face="Arial, sans-serif" size="2">partition_table_scan_threads=min(partitions,</font><span style="font-size: 12px;">DS_MAX_SCANS*</span></span><span style="font-family: Arial, sans-serif; font-size: small; line-height: normal; ">MAX_PDQPRIORITY*</span><span style="font-family: Arial, sans-serif; font-size: small; line-height: normal; ">PDQPRIORITY/10000)。</span></div><div><span style="font-family: Arial, sans-serif; font-size: small; line-height: normal; "><br></span></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">计算出单表并行扫描线索的数量以后，数据库系统将开始等待获取相等数量的VPs thread，在这个过程中，该会话相关的线索将进入等待队列(Ready. onstat -g rea)，直到获得与计算值相等的线索，才开始执行。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">这就是系统相对繁忙时，PDQ并行查询并不是马上就开始执行，而是需要等待一会才开始快速执行的原因。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">通过以上四个条件，单个会话可以启动的并行查询线索数就被限制了。通过DS_MAX_SCANS的设置，总的并行查询线索数也被限制了。同时，Informix还提供了DS_MAX_QUERIES参数，用于限制并行查询的总个数。</span></font><span style="font-family: Arial, sans-serif; font-size: small; line-height: normal; ">DS_MAX_QUERIES可以直接影响到并发查询的线索数，但不是决定性的参数，它的主要作用是用来与</span><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; ">DS_TOTAL_MEMORY</span><span style="background-color: rgb(255, 255, 255); font-family: Arial, sans-serif; font-size: 13px; line-height: normal; "> 参数配合，限制单个查询可以使用的最大内存数。</span></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">关于PDQ其它非关键参数，将放在后续文章详细讨论。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;">综上所述，合理对访问频繁的大表进行分片，谨慎并适当设置PDQ参数，将可以给系统带来明显的性能提升。</span></font></div><div><font face="Arial, sans-serif" size="2"><span style="line-height: normal;"><br></span></font></div><div><embed id="lingoes_plugin_object" type="application/lingoes-npruntime-capture-word-plugin" hidden="true" width="0" height="0"></div><div><embed id="lingoes_plugin_object" type="application/lingoes-npruntime-capture-word-plugin" hidden="true" width="0" height="0"></div>

数据库

著作权归作者所有

如果觉得我的文章对您有用，请点赞。您的支持将鼓励我继续创作！

添加新评论0 条评论

Ctrl+Enter 发表

匿名评论

严格PDQ的使用评估——Informix数据库性能优化（8）

添加新评论0 条评论

作者其他文章

相关文章

相关问题

相关资料