SQL性能优化策略

发现问题

• 通过业务监控发现慢SQL或接口响应延迟。
• 利用性能分析工具定位问题。

  定位SQL语句

  • 使用监控工具确定影响性能的SQL语句和表。

    SQL查询变慢原因

    1. 索引失效：查询未使用索引或索引效率低。
    2. 多表连接：JOIN操作导致性能下降。
    3. 查询字段过多：使用SELECT *返回不必要字段。
    4. 数据量过大：单表数据量超1000万条。
    5. 索引基数太小：字段值分布不均，索引效率低。
    6. 数据库连接不足：业务量大或慢SQL占用连接。
    7. 表结构不合理：字段过长或缺乏冗余。
    8. 数据库IO或CPU负载高：资源不足影响查询速度。
    9. 长事务：事务占用连接资源。
    10. 锁竞争：并发请求争夺资源。
    11. 数据库参数设置不合理：内存、缓存、线程池配置不当。

    索引失效优化

    • 分析执行计划，优化索引设计或SQL语句。
    • 避免通配符LIKE和字段函数操作。
    • 强制指定索引或优化查询条件。

      特殊情况：Explain执行计划分析

      • type=index可能意味着全索引扫描，并非有效索引使用。
      • 调整查询或索引以解决。

        多表JOIN优化

        • 优化查询条件，使用有效连接字段索引。
        • 限制返回字段数量。
        • 考虑表大小和结构，使用适当连接类型。

          索引基数问题

          • 避免对基数低的字段建立索引。

            查询字段过多优化

            • 避免使用SELECT *，只查询必要字段。
            • 垂直分表减少单表数据量。

              数据量过大解决方案

              • 数据归档：移出历史数据。
              • 分库分表、分区：分散数据存储。
              • 使用第三方数据库：如OceanBase、TiDB、Elasticsearch。

                数据库连接数不足

                • 分析原因，如业务量大或慢SQL。
                • 使用缓存、异步更新、拆分存储或合并更新请求。

                  表结构不合理

                  • 重构数据库或考虑分表。

                    数据库IO或CPU高负载

                    • 分析原因，调整资源配置。

                      长事务

                      • 优化事务处理，避免长时间占用连接。

                        锁竞争

                        • 优化并发控制，减少锁等待。

                          数据库参数设置

                          • 调整内存、缓存、线程池大小等参数。
                          
                          （图片来源网络，侵删）