MySQL语句性能优化
MySQL概述
1.数据库设计 3范式
2.数据库分表分库---会员系统（） 水平分割（分页如何查询）MyChar 、垂直
3.怎么定位慢查询
---------------------
数据库索引的优化、索引原理
SQL语句调优
数据库读写分离--MyChar
---------------------
分组 having
存储过程、触发器、函数
存储过程：写了一块sql语句，类似Java中方法，只需调用传参数，弊端：sql语句是写死的，不好灵活改变。
mysql（免费、开源）oracle（收费）
mysql 分页 limit 。oracle:rownum 伪列
MySQL优化方案
1.数据库设计要合理（3F）
2.添加索引（普通索引、主键索引、唯一索引、全文索引）底层：B-Tree和B+Tree 和二叉树算法一样，减少全表扫描
3.分表分库技术（取模分表、水平分割、垂直分割）
4.读写分离
5.存储过程
6.配置MySQL最大连接数 my.ini
7.mysql服务器升级
8.随时清理碎片化
9.sql语句调优 核心
数据库三大范式
数据库设计
什么是数据设计（减少冗余量、3F）
什么事数据库3范式
1F 原子约束 表示每列不可再分
id name sex address
1 zhangsan 0 北京
是否保证原子（看业务）
2F 保证唯一，主键
id orderNum（唯一） name sex address
1 123 zhangsan 0 北京
订单表中，是否用id作为订单号？不允许。
项目内部rpc远程调用 大多数是使用id进行通讯的，给外部看的是orderNum，保证系统安全性。
分布式系统解决并发生成订单号
怎么保证抢票中，订单号不会重复生成？怎么保证订单的幂等性（幂等就是不重复）？
提前将订单号生成号，存在redis中，需要是直接去resis中去取；分布式锁
3F 不要有冗余数据 classId className重复，这个表只存classId即可
id name sex address classId className
1 zhangsan 0 北京 1 一班
2 lisi 0 北京 2 二班
2 wangwu 0 北京 1 一班
从新建张表：
classId className
1 一班
2 二班
注意：不一定完全要遵循第3F。
MySQL分库分表
什么时候分库：
电商项目当中，将一个项目拆分，拆分成多个小项目，每个小的项目有自己单独的数据库，互不影响。--垂直分割。
会员数据库、订单数据库、支付数据库
什么时候分表：
水平分割，分表规则，根据业务需求。存放日志 根据年分表、手机号 根据前三位分表 136 135 135
水平分割（取模算法）
user表 分成三张表
id name address
1 张三 北京
2 李四 北京
3 王五 北京
4 赵六 北京
5 小明 北京
6 小红 北京
怎样将6条数据存放在三张不同的表中，怎样非常均匀？ 取模算法
表: user0 user1 user2
第一条数据：1%3=1 ，放user1表。
第二条数据：2%3=2 ，放user2 表。
第三条数据：3%3=0 ，放user0表。依次类推
实现取模分表算法：三张表id不能自动增长，需要专门有一张表存放userId,给赋值过去。
水平分割取摸算法案例
好处：非常均匀的分配
怎样查在哪里表？找id为6在哪个表 6%3=0 在user0表找
Demo:
create table uuid(
id int unsinged primary key auto_increment,
)engine=myisam charset utf8;
@Service
public class UserService{
@Autowired
private JdbcTemplate jdbcTemplate;
/**
* 生成用户信息
*/
public String regit(String name,String pwd){
//1.生成userId
String insertUuidSql="insert into uuid values (null)";
// 这里一般用直接返回主键id,不用下面的查询
jdbcTemplate.update(insertUuidSql);
//select last_insert_id()表示查询最近的主键ID的意思
Long userId = jdbcTemplate.queryForObject("select last_insert_id()",requiredType，Long.class);
//2.存放具体哪张表中
String tableName = "user"+userId%3;
//3插入到具体表中
String insertUserSql = "insert into "+tableName+" values("+userId+","+userName+","+pwd+")";
System.out.println(insertUserSql);
jdbcTemplate.update(insertUserSql);
return "success";
}
/**
* 根据id查询
*/
public String get(Long userId){
//1.存放具体哪张表中
String tableName = "user"+userId%3;
String selectUserSql="select name from "+tableName+"where id="+userId;
String name = jdbcTemplate.queryForObject(selectUserSql,String.class);
return name;
}
}
@RestController
public class UserController{
@Autowired
private UserService userService;
@RequestMapping("/regit")
public String regit(String name,String pwd){
return userService.regit(name,pwd);
}
@RequestMapping("/getUser")
public String get(Long userId){
return userService.get(userId);
}
}
@SpringBootApplication
public class App{
public static void main(String[] args) {
SpringApplication.run(App.class,args);
}
}
分表之后有什么缺点？
1.怎么分页查询
2.查询非常受限制，例如查性别男要查三张表
3.取模算法 如果表发生改变了，表要重新分，打乱了 使用阿里云RDS数据库
先主表存放所有数据 ，根据业务需求进行分表。
如何定位慢查询
什么是慢查询？
MySQL默认慢查询是10秒，如果10秒没有响应回来就是慢查询，一般在生产环境设置为1秒
慢查询都会有日志存放
show status 命令
如何修改慢查询
--查询慢查询次数
show status like 'slow_queries';
--查询慢查询时间
show variables like 'long_query_time';
--修改慢查询时间
set long_query_time=1; 表示修改慢查询时间为1秒
如何将慢查询定位到日志中
在默认情况下，MySQL不会记录慢查询，需要在启动MySQL的时候，指定记录慢查询才可以。
编辑配置文件/etc/my.cnf加入如下内容
[mysqld]
slow_query_log = ON
slow_query_log_file = /var/lib/mysql/test-10-226-slow.log
long_query_time = 1
修改配置后重启mysql
systemctl restart mysqld
mysql -uroot -p
MySQL索引概述
为什么要索引？提高查询效率
为什么索引能够提高查询效率--索引实现原理 折半查找
索引分类：
主键索引 -- primary key
添加主键索引方式：
1. 创建表的时候添加：id int unsinged primary key auto_increment,
2. 如果创建表的时候没有添加：alert table 表名 add primary key (列名);
删除主键索引：alert table 表名 drop primary key;
C:\ProgramData\MySQL\MySQL Server 5.6\data\test 下：
*.frm 表结构文件
*.MYD 数据结构文件
*.MYI 索引文件
唯一索引
组合索引
全文索引
普通索引
索引底层实现原理
索引底层采用b-tree 折半查找又叫二分查找
没有索引是全表扫描--索引 减少全表扫描
索引 b-tree 首先生成索引文件
索引有什么缺点？增加、删除 索引文件也需要更新
普通索引与唯一索引
唯一索引：关键字unique
create table 表名称(
id int primary key auto_increment, // 主键索引
name varchar(32) unique; //唯一索引
)
注意：unique字段可以为null，并可以有多个null，但是如果有具体内容，则不能重复。
唯一索引用的不多，被主键索引代替了。
普通索引：
create table 表名(
id int unsigned,
name varchar(32)
)
创建普通索引：creat index 索引名 on 表 (列1，列2)；
creat index index_aaa on aaa (name)；
--执行计划 查看有没有使用索引
explain select * from aaa where name="zhangsan";
查询出type为ref表示使用索引 all是全表扫描
全文索引：
create table aaa(
id int primary key,
title varchar(200),
body TEXT,
FULLTEXT(title,body) // 创建全文索引
)engine = innodb;
模糊查询：select * from aaa where body like '%张%' ； 错误用法，索引不会生效
使用执行计划查看是否使用索引：
explain select * from aaa where body like '%张%' ；
使用索引查询： select * from aaa where match(title,body) against('张')
使用执行计划查看是否使用索引：
explain select * from aaa where match(title,body) against('张')
使用全文索引的时候：
不要like
企业实际中不会采用表的全文索引。全文索引有非常大的缺点，InnoDB（数据库存储引擎）中不支持全文索引
SQL语句优化方案总结
索引优缺点：
优点：提高程序效率
缺点：增加、删除慢，索引文件需要更新，增加内存
什么字段适合加索引？
查询次数比较多，值有非常多的不同。
建立索引场景：
建立索引的时候，where条件需要查询的，并且值非常多的不同的。唯一几个值（sex:0，1），不需要建立索引。
索引注意事项，sql调优部分：
--创建主键索引
alert talbe 表名 add primary key (列名);
--创建组合索引文件
alert table 表名 add index my_ind(列1,列2);
注意：
1.对于创建的多列索引，如果不使用第一部分，则不会创建索引。
explain select * from 表名 where 列1 = 'aaa'; -- 使用索引
explain select * from 表名 where 列2 = 'bbb'; -- 使用全表扫描
2.使用索引的时候，不要使用like'%%' ,这样会全表扫描，使用like，开头不要%
explain select * from 表名 where 列1 like '%aaa%'; -- 使用全表扫描
explain select * from 表名 where 列1 like 'aaa%'; -- 使用索引
3.使用or，条件都必须加索引，只要有一个条件不加索引，就会全表扫描
explain select * from 表名 where 列1 = 'aaa' or 列3 ='ccc'; -- 使用索引
4.判断是否为null ，使用is null 不要=null
5.使用group by 分组不会采用索引，会全表扫描。
explain select * from 表名 group by 列2；
6.分组需要效率高，禁止排序（分组默认排序）
explain select * from 表名 group by 列2 order by null ；
7. select * from aaa where userId>=100 和 select * from aaa where userId>100 哪个效率高
不要使用大于等于，会判断两次全表扫描
8. in和notin 加上索引后也不会使用索引，能用between就不要用in
9.查询量非常大时，采用缓存、分表、分页。
MySQL存储引擎区别
MySQL存储引擎：innodb/ myisam/ memory
主流：innodb 支持事务机制
innodb与myisam区别：
批量添加--myisam效率高
innodb--事务机制非常安全
锁机制：
myisam是表锁
innodb是行锁，不会影响整个表
数据结构：
myisam 支持全文检索，一般不用数据库自带的全文检索。
都支持b-tree数据结构
索引缓存 都支持。
Myisam注意事项
创建myisam引擎表结构：
create table ccc(id int,name varchar(32))engine=myisam;
添加数据：
insert into ccc values(1,'a');
insert into ccc values(2,'b');
insert into ccc values(3,'b');
insert into ccc select id,name from ccc;
删除id为3的所有数据
delete from ccc where id = 3;
会发现：ccc.MYD文件大小没有改变，缺点：没有真正的删除，删除后能够非常快的恢复过来
真要删除使用：optimize table ccc; 表示对myisam进行整理，清了碎片化。
企业实际中是不会物理删除数据的。数据迁移。
MySQL语句性能优化相关推荐
- mysql语句性能优化-使用case when 代替count(*)
文章目录 前言 一.问题SQL 二.修改后SQL 总结 前言 负责运维的项目有个页面加载特别慢,打开差不多要2分钟,但是页面数据并不算多,只有几百条.为了把页面加载速度慢的问题解决,通过查看后台日志, ...
- 【MySQL】47 条SQL语句性能优化策略
本文会提到 47 条 SQL 语句性能优化策略. 1. 对查询进行优化,应尽量避免全表扫描,首先应考虑在 WHERE 及 ORDER BY 涉及的列上建立索引. 2. 应尽量避免在 WHERE 子句中 ...
- DBA很忙—MySQL的性能优化及自动化运维实践
作者:王辰 来自:高效运维(ID:greatops) DBA的日常工作 首先,我们来看看DBA的具体工作,我觉得 DBA 真的很忙:备份和恢复.监控状态.集群搭建与扩容.数据迁移和高可用,这是我们 D ...
- MySQL数据库性能优化之一
MySQL数据库性能优化需要考虑的几个方面: 1.sql语句及索引优化 2.数据库结构优化 3.系统配置优化 4.硬件优化 转载于:https://blog.51cto.com/davidlinux/ ...
- 淘宝内部分享：MySQL MariaDB性能优化
淘宝内部分享:MySQL & MariaDB性能优化 摘要:MySQL是目前使用最多的开源数据库,但是MySQL数据库的默认设置性能非常的差,必须进行不断的优化,而优化是一个复杂的任务, ...
- 52条SQL语句性能优化策略
本文会提到 52 条 SQL 语句性能优化策略. 1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 WHERE 及 ORDER BY 涉及的列上建立索引. 2.应尽量避免在 WHERE 子句中对字 ...
- MySQL主从复制性能优化
MySQL主从复制性能优化 MySQL的主从复制的基本原理是从库连接到主库,主库生成一个主库DUMP线程,该DUMP线程的主要任务是 一直挖掘binlog日志,然后发送到从库的IO线程,IO线程接收到 ...
- sql加上唯一索引后批量插入_阿里大佬总结的52条SQL语句性能优化策略，建议收藏...
你知道的越多,不知道的就越多,业余的像一棵小草! 你来,我们一起精进!你不来,我和你的竞争对手一起精进! 编辑:业余草 cnblogs.com/SimpleWu/p/9929043.html 推荐:h ...
- MySQL 数据库性能优化之SQL优化
2019独角兽企业重金招聘Python工程师标准>>> MySQL 数据库性能优化之SQL优化 发布时间: 2012 年 3 月 21 日 发布者: OurMySQL 来源:简朝阳 ...
最新文章
- 从复旦博士生到985高校副教授，贫穷使人深知摆脱自卑的艰难
- CH340E USB转串口 IC测试电路
- 弹性计算双周刊 第 9 期
- 从零开始学习docker（四）host
- Java I/O体系原理
- 深入浅出MFC文档/视图架构之文档模板
- python音乐下载器交互界面_基于Python实现下载网易音乐代码实例
- 32位存储环境下整数范围为什么是[-2^31,2^31-1]?
- HBase基本概念与基本使用
- bash: ./install_software: Permission denied
- android 表格控件点击事件,Android零基础入门｜RecyclerView点击事件处理
- Sublime Text 3 汉化
- 检查数组中的子字符串– Java，Python和Swift
- 二、自然语言处理发展历程
- win10内置ubuntu, 启动时提示“指定的网络名不再可用”解决办法
- java调用百望税控NISEC_SKSC.dll发送xml报文
- 在2020年开发像TikTok这样的移动应用需要花多少钱？
- 安卓查壳与反编译相关知识集锦
- C++中sprintf_s与sprintf的不同
- MATLAB矩阵生成