百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程网 > 正文

SQL优化的36个建议!干货满满!

yuyutoo 2024-12-13 17:01 4 浏览 0 评论

一、优化知识储备

1、mysql优化原则:尽量避免全表扫描、合理使用索引、避免返回大量数据给客户端、避免使用游标、避免频繁创建删除临时表。

联表查询时尽量用小表驱动大表,小的数据集驱动大的数据集,小表放左边。

2、学会查看SQL执行计划

explain select * from users;

速度排行:
type:  system > const > eq_ref > ref > range > index > ALL
----------------------------------------
ALL 全表扫描
index  扫描索引上全部数据,比ALL快一点   场景:count(*)
range 范围                                                    user_id>200
ref   普通非唯一索引                                      user_name=100
eq_ref  唯一索引
const 唯一索引且条件是普通常量                   user_id=100
system 系统表

3、SQL优化目标:优化到range及以上级别,index也很慢和ALL基本一样。

4、注意客户端自带的limit会影响你的判断。(干货啊!!!这个一般百度上是没有的,百度不到!!但是却容易被忽视!!!

客户端一般都有默认带上limit 200,比如dbeaver配置,可以关掉。

dbeaver 窗口-首选项-编辑器-数据编辑器 ,把数据集获取大小改为0

所以为什么大家经常测性能的时候,明明程序里面查询很慢,在dbeaver里面却很快,原因就是dbeaver可能偷偷给你加了limit 200。

这个在你测试性能的时候关掉,平时还是加上200的配置吧


5、用mysql自带性能分析可以知道dbeaver默认加了limit 200

set profiling =1;
select * from users where user_name =9000;
show   profiles; --可以看到实际的执行语句


二、尽量不做的事情


1.尽量不在where条件用!= 或 <>

2.尽量不用 is null 和 is not null

3.尽量不用or

4.尽量不用like,如果一定要用就用右模糊 user_name like'xx%'

可以用explain验证一下:

在字段已经建立索引的情况下:
'xx%'  走的是range执行计划,前面说过range也是优化目标。
'%xx'  走ALL全表扫描
'%xx%' 走ALL全表扫描
如果不是索引字段,那不管什么方式都是ALL全表扫描。

如果要用全模糊,那可以用全文索引解决like慢问题

某个段接like,那么这个字段是不走索引的,所以like就特别慢 ,要700ms

全文索引可以解决这个问题

-- 全文索引
create fulltext index idx_users_remark on users(remark);


全文索引查询方式:只要1ms

select * from users  where Match (remark) Against('备注_100111*' in boolean mode);

5.尽量不用 in not in

6.尽量不要在=左边计算,或函数,如 where to_char(name)='xx'

7.不要用字符串作为主键

8.不要用select *

select * 问题:
增加很多不必要的消耗,比如CPU、IO、内存、网络带宽;
增加了使用覆盖索引的可能性;
增加了回表的可能性;
当表结构发生变化时,前端也需要更改;
查询效率低;

select * from users;--用时 2.1s

select user_id from users;--用时 453ms

9. 不要用group by having 来过滤,而是先在where 条件过滤后再group by.

10.尽量使得表连接不要超过5个

11.索引不是越多越好,会降低插入更新的速度,控制在5个以内

12.尽量避免使用游标

因为游标的效率较差,如果游标操作的数据超过1万行,那么就应该考虑改写。

13.索引不适合建在有大量重复数据的字段上,比如性别,排序字段应创建索引

14.尽量不要存储图片、文件等大数据。

15.单表数据最好不要超过500w,超过2000w速度明显变慢。

16.in 内数据尽量不要太多,如果是连续的就用between代替。

17.不要在varchar字段上用数字查询,否则会导致索引失效。

比如 user_name =1234 要改成 user_name='1234'

18.复合索引(a,b,c),不要单独用b、c、或者bc进行查询。

复合索引最左原则:a 、ab、abc、ac 都是能用上索引的。

(a,b,c) 为复合索引 ,那么它满足最左原则。什么意思?where a=xx  走索引,其他情况呢
a   走索引
a,b 走索引 , 顺序可以变   ba 也走,mysql会优化位置
a,c 走索引
a,b,c 走索引
b  不走索引  ,为什么这么说,它走的是index,和全表扫描ALL几乎没区别,慢的要死
c  不走索引 , 为什么这么说,它走的是index,和全表扫描ALL几乎没区别,慢的要死
bc 不走索引
就说,必须从最左边开始都要有。


19.主键是自带唯一索引的,因此不需要再在主键上建索引。


三、尽量要做的事情


1.复合索引应该要第一个作为条件,否则不生效。

2.能用between 就不要用in

3.exists 代替in

4.数字型字段尽量用number别用varchar

5.查询条件尽量使用上索引

6.varchar代替char

varchar 可变,存多少占多少空间;char如果存的不够会补空格。

7.left join 左边放小表(数据量少的表)

8. 尽量使用limit 可以提高查询速度,避免全表扫描。

9.批量插入提高性能。

10.查询使用最频繁的列放在联合索引的最左侧。

INSERT INTO users (user_id,user_name)
 VALUES(1,'aaa'),(2,'bbb');

11.财务、银行相关的金额字段必须使用decimal类型

非精准浮点:float,double

精准浮点:decimal

Decimal类型为精准浮点数,在计算时不会丢失精度;

占用空间由定义的宽度决定,每4个字节可以存储9位数字,并且小数点要占用一个字节;

可用于存储比bigint更大的整型数据;

12.建议把BLOB或是TEXT列分离到单独的扩展表中

Mysql内存临时表不支持TEXT、BLOB这样的大数据类型,如果查询中包含这样的数据,在排序等操作时,就不能使用内存临时表,必须使用磁盘临时表进行。而且对于这种数据,Mysql还是要进行二次查询,会使sql性能变得很差,但是不是说一定不能使用这样的数据类型。

如果一定要使用,建议把BLOB或是TEXT列分离到单独的扩展表中,查询时一定不要使用select * 而只需要取出必要的列,不需要TEXT列的数据时不要对该列进行查询。

相关推荐

.NET 奇葩问题调试经历之3——使用了grpc通讯类库后,内存一直增长......

...

全局和隐式 using 指令详解(全局命令)

1.什么是全局和隐式using?在.NET6及更高版本中,Microsoft引入了...

请停止微服务,做好单体的模块化才是王道:Spring Modulith介绍

1、介绍模块化单体是一种架构风格,代码是根据模块的概念构成的。对于许多组织而言,模块化单体可能是一个很好的选择。它有助于保持一定程度的独立性,这有助于我们在需要的时候轻松过渡到微服务架构。Spri...

ASP.NET程序集引用之痛:版本冲突、依赖地狱等解析与实战

我是一位多年后端经验的工程师,其中前几年用ASP.NET...

.NET AOT 详解(.net 6 aot)

简介AOT(Ahead-Of-TimeCompilation)是一种将代码直接编译为机器码的技术,与传统的...

一款基于Yii2开发的免费商城系统(一款基于yii2开发的免费商城系统是什么)

哈喽,我是老鱼,一名致力于在技术道路上的终身学习者、实践者、分享者!...

asar归档解包(游戏arc文件解包)

要学习Electron逆向,首先要有一个Electron开发的程序的发布的包,这里就以其官方的electron-quick-start作为例子来进行一下逆向的过程。...

在PyCharm 中免费集成Amazon CodeWhisperer

CodeWhisperer是Amazon发布的一款免费的AI编程辅助小工具,可在你的集成开发环境(IDE)中生成实时单行或全函数代码建议,帮助你快速构建软件。简单来说,AmazonCodeWhi...

2014年最优秀JavaScript编辑器大盘点

1.WebstormWebStorm是一种轻量级的、功能强大的IDE,为Node.js复杂的客户端开发和服务器端开发提供完美的解决方案。WebStorm的智能代码编辑器支持JavaScript,...

基于springboot、tio、oauth2.0前端vuede 超轻量级聊天软件分享

项目简介:基于JS的超轻量级聊天软件。前端:vue、iview、electron实现的PC桌面版聊天程序,主要适用于私有云项目内部聊天,企业内部管理通讯等功能,主要通讯协议websocket。支持...

JetBrains Toolbox推出全新产品订阅授权模式

捷克知名软件开发公司JetBrains最为人所熟知的产品是Java编程语言开发撰写时所用的集成开发环境IntelliJIDEA,相信很多开发者都有所了解。而近期自2015年11月2日起,JetBr...

idea最新激活jetbrains-agent.jar包,亲测有效

这里分享一个2019.3.3版本的jetbrains-agent.jar,亲测有效,在网上找了很多都不能使用,终于找到一个可以使用的了,这里分享一下具体激活步骤,此方法适用于Jebrains家所有产品...

CountDownTimer的理解(countdowntomars)

CountDownTimer是android开发常用的计时类,按照注释中的说明使用方法如下:kotlin:object:CountDownTimer(30000,1000){...

反射为什么性能会很慢?(反射时为什么会越来越长)

1.背景前段时间维护一个5、6年前的项目,项目总是在某些功能使用上不尽人意,性能上总是差一些,仔细过了一下代码发现使用了不少封装好的工具类,工具类里面用了好多的反射,反射会影响到执行效率吗?盲猜了一...

btrace 开源!基于 Systrace 高性能 Trace 工具

介绍btrace(又名RheaTrace)是抖音基础技术团队自研的一款高性能AndroidTrace工具,它基于Systrace实现,并针对Systrace不足之处加以改进,核心改进...

取消回复欢迎 发表评论: