美文网首页
MYSQL 全表扫描

MYSQL 全表扫描

作者: 阡洛 | 来源:发表于2020-06-14 17:24 被阅读0次

全表扫描是数据库搜寻表的每一条记录的过程,直到所有符合给定条件的记录返回为止。通常在数据库中,对无索引的表进行查询一般称为全表扫描;然而有时候我们即便添加了索引,但当我们的SQL语句写的不合理的时候也会造成全表扫描。

对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。

尝试下面的技巧以避免优化器错选了表扫描:
使用ANALYZE TABLE tbl_name为扫描的表更新关键字分布。
对扫描的表使用FORCE INDEX告知MySQL,相对于使用给定的索引表扫描将非常耗时。
SELECT * FROM t1, t2 FORCE INDEX (index_for_column)WHERE t1.col_name=t2.col_name;
--max-seeks-for-key=1000选项启动mysqld或使用SET max_seeks_for_key=1000告知优化器假设关键字扫描不会超过1,000次关键字搜索。

避免全表扫描的优化方案:

1. 应尽量避免在where子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如: select id from t where num is null

{\color{blue}{\small\text{如果某列存在空值,即使对该列建索引也不会提高性能。}}}任何在where子句中使用is null或is not null的语句,优化器是不允许使用索引的。
此例可以在num上设置默认值0,确保表中num列没有null值,然后这样查询: select id from t where num=0或者select id from t where num is not null and num=0这样也可以用到索引,但select id from t where num=0 and num is not null就用不到索引了。

2. 应尽量避免在 where 子句中使用!=<>操作符,否则将引擎放弃使用索引而进行全表扫描。

MySQL只有对以下操作符才使用索引:<,<=,=,>,>=,BETWEEN,IN,以及某些时候的LIKE。可以在LIKE操作中使用索引的情形是指另一个操作数不是以通配符(%或者_)开头的情形。例如,SELECT id FROM t WHERE col LIKE 'Mich%';这个查询将使用索引,但SELECT id FROM t WHERE col LIKE '%ike';这个查询不会使用索引。

3. 应尽量避免在 where子句中使用 or来连接条件,否则将导致引擎放弃使用索引而进行全表扫描,如: select id from t where num=10 or num=20

建议使用union all,可以这样查询:select id from t where num=10 union all select id from t where num=20

4.innot in也要慎用,否则会导致全表扫描,如:select id from t where num in(1,2,3)

如果是连续数据,可以改为select id from t where num between 1 and 3;当数据较少时也可以参考union用法。

5.左模糊查询Like %XXX% ,也将导致全表扫描:select id from t where name like '%abc%'或者select id from t where name like '%abc'

{\color{blue}{\small\text{若要提高效率,可以考虑全文检索。}}}select id from t where name like 'abc%'才用到索引。

6. 如果在where子句中使用参数,也会导致全表扫描。

SQL只有在运行时才会解析局部变量,但优化程序不能将访问计划的选择推 迟到运行时;它必须在编译时进行选择。然而,如果在编译时建立访问计划,变量的值还是未知的,因而无法作为索引选择的输入项。如下面语句将进行全表扫描: select id from t where [num=@num](mailto:num=@num),可以改为强制查询使用索引:select id from t with(index(索引名)) where [num=@num](mailto:num=@num)

7.应尽量避免在where子句中对字段进行表达式操作,这将导致引擎放弃使用索引而进行全表扫描。

如: select id from t where num/2=100应改为: select id from t where num=100*2

8. 应尽量避免在where子句中对字段进行函数操作,这将导致引擎放弃使用索引而进行全表扫描。

如:select id from t where substring(name,1,3)='abc'select id from t where datediff(day,createdate,'2005-11-30')=0应改为: select id from t where name like 'abc%'select id from t where createdate>='2005-11-30' and createdate<'2005-12-1'

9.不要在where子句中的=左边进行函数、算术运算或其他表达式运算,否则系统将可能无法正确使用索引。
10.在使用索引字段作为条件时,如果该索引是复合索引,那么必须使用到该索引中的第一个字段作为条件时才能保证系统使用该索引,否则该索引将不会被使用,并且应尽可能的让字段顺序与索引顺序相一致。
11.不要写一些没有意义的查询,如需要生成一个空表结构:select col1,col2 into #t from t where 1=0

这类代码不会返回任何结果集,但是会消耗系统资源的,应改成这样: create table #t(...)

12.很多时候用 exists代替in是一个好的选择。

select num from a where num in(select num from b)改为换: select num from a where exists(select 1 from b where num=a.num)

13.并不是所有索引对查询都有效,SQL是根据表中数据来进行查询优化的,当索引列有大量数据重复时,SQL查询可能不会去利用索引。

如一表中有字段sex,male、female几乎各一半,那么即使在sex上建了索引也对查询效率起不了作用。

14.索引并不是越多越好。

索引固然可以提高相应的 select的效率,但同时也降低了 insertupdate的效率。因为insertupdate 时有可能会重建索引,所以怎样建索引需要慎重考虑,视具体情况而定。
一个表的索引数最好不要超过6个,若太多则应考虑一些不常使用到的列上建的索引是否有必要。

15.不要使用count(*)

如:select count(*) from member, 建议使用select count(1) from member

16.应尽可能的避免更新 clustered 索引数据列。

因为 clustered 索引数据列的顺序就是表记录的物理存储顺序,一旦该列值改变将导致整个表记录的顺序的调整,会耗费相当大的资源。若应用系统需要频繁更新 clustered 索引数据列,那么需要考虑是否应将该索引建为 clustered 索引。

17.尽量使用数字型字段。

若只含数值信息的字段尽量不要设计为字符型,这会降低查询和连接的性能,并会增加存储开销。这是因为引擎在处理查询和连接时会逐个比较字符串中每一个字符,而对于数字型而言只需要比较一次就够了。

18.尽可能的使用 varchar/nvarchar 代替char/nchar

因为首先变长字段存储空间小,可以节省存储空间,其次对于查询来说,在一个相对较小的字段内搜索效率显然要高些。

19.任何地方都不要使用 select * from t,用具体的字段列表代替*,不要返回用不到的任何字段。
20.尽量使用表变量来代替临时表。

如果表变量包含大量数据,请注意索引非常有限(只有主键索引)。

21.避免频繁创建和删除临时表,以减少系统表资源的消耗。
22.临时表并不是不可使用,适当地使用它们可以使某些例程更有效。

例如,当需要重复引用大型表或常用表中的某个数据集时。但是,对于一次性事件,最好使用导出表。

23.在新建临时表时,如果一次性插入数据量很大,那么可以使用 select into代替 create table,避免造成大量 log ,以提高速度;如果数据量不大,为了缓和系统表的资源,应先create table,然后insert
24.如果使用到了临时表,在存储过程的最后务必将所有的临时表显式删除。

truncate table ,然后 drop table ,这样可以避免系统表的较长时间锁定。

25.尽量避免使用游标。

因为游标的效率较差,如果游标操作的数据超过1万行,那么就应该考虑改写。

26.使用基于游标的方法或临时表方法之前,应先寻找基于集的解决方案来解决问题,基于集的方法通常更有效。
27.与临时表一样,游标并不是不可使用。

对小型数据集使用FAST_FORWARD游标通常要优于其他逐行处理方法,尤其是在必须引用几个表才能获得所需的数据时。在结果集中包括“合计”的例程通常要比使用游标执行的速度快。如果开发时间允许,基于游标的方法和基于集的方法都可以尝试一下,看哪一种方法的效果更好。

28.在所有的存储过程和触发器的开始处设置 SET NOCOUNT ON,在结束时设置 SET NOCOUNT OFF。无需在执行存储过程和触发器的每个语句后向客户端发送DONE_IN_PROC消息。
29.尽量避免大事务操作,提高系统并发能力。
30.尽量避免向客户端返回大数据量。

若数据量过大,应该考虑相应需求是否合理。

https://blog.csdn.net/chen1280436393/article/details/80493088

相关文章

  • MYSQL 全表扫描

    全表扫描是数据库搜寻表的每一条记录的过程,直到所有符合给定条件的记录返回为止。通常在数据库中,对无索引的表进行查询...

  • MySQL如何避免全表扫描

    MySQL全表扫描在大多数场景下性能都是非常低下的,尤其在表数据量特别大的情况下,全表扫描会耗尽数据库资源,严重时...

  • mongo索引

       不使用索引的查询称为全表扫描。通常来说,应该尽量避免全表扫描,全表扫描的效率非常低。   创建索引: db....

  • 全表扫描对内存的影响

    全表扫描对 server 层的影响 假如扫描的是InnoDB引擎表,那么全表扫描会扫描所有的主键索引。将所查到的每...

  • MySQL(4)应用优化

    MySQL应用优化 4.1-MySQL索引优化与设计 索引的作用 快速定位要查找的数据 数据库索引查找 全表扫描 ...

  • 数据库

    type类型 All:不用索引的全表扫描 index:使用索引的全表扫描 range:使用索引的范围扫描(记得使用...

  • mySql引擎

    MySQL引擎 一、MyIASM 默认引擎, 会存储行数,在count(*)时不会全表扫描 不支持事务, 不支持行...

  • ELASTICSEARCH学习笔记

    一、ELASTICSEARCH 1.什么叫搜索? 2.为什么mysql不适合全文检索 美丽的%风景缺点:全表扫描,...

  • 提高sql语句的查询速度

    where和limit都具有避免全表扫描的功能 (mysql),区别在于:where能够充分利用索引,而limit...

  • sphinx全文搜索引擎简单使用(Windows)

    当一个功能需要对表中的text varchar等文本进行like查询时,MySQL全表扫描很慢,需要sphinx ...

网友评论

      本文标题:MYSQL 全表扫描

      本文链接:https://www.haomeiwen.com/subject/fpnatktx.html