目前可以说大多数程序的所耗的时间大部分在于数据库查询中。打个比方,程序内部代码跑1秒,数据库查询数据需要10秒,maybe夸大了。

主要通过三种途径提高数据库查询效率:1.SQL的性能优化,2.数据库的性能优化,3.查询优化

1.SQL的性能优化
 SQL语句是用户访问关系数据库中数据的唯一方法,通常在一个关系数据库上,服务器的SQL进程会使用该服务器的60%~90%的资源,大部分数据库的效率的问题都是由于SQL语句编写不善引起的,所以SQL语句的性能优化十分重要。
为了编写出高效的SQL语句,首先应按照一定的具体规范来编写SQL语句,Database administrator 都需要收集和整理一份SQL编码规范。其次实在真实数据库上对这些SQL语句进行性能测试和跟踪并不断调整,到达最优以后才正式上线运行。最后需要强调的是,随着数据量的变化和数据库版本升级后,往往会导致部分SQL性能下降,所以对SQL的跟踪优化是Database administrator的一项持续不断的工作。

2.数据库的性能优化
Database System 是一组程序作用在数据文件上对外提供服务,所以其本身的性能优化也十分重要,对其的优化工作主要是相应的参数调整。
(1) 通过见识database system的内存对象,获得系统性能指标,发现系统的性能缺陷以及原因
(2) 针对导致系统性能缺陷的原因,进行相应的参数调整(如增加数据缓存区的大小)
(3) 跟踪参数调整后系统的各项性能指标,看是否达到预期要求,否则继续调整。
例如,Oracle通常利用定时执行 statspacke.snap 包收集数据库的运行状态,然后利用程序 spreport.sql对两个才几点之间的数据产生报表,以分析这段时间数据库的各种运行指标。Sybase数据库用 sp_sysmon,sp_monitor,sp_configure 命令才采集和分析一段时间内数据库的各种运行指标。

3.查询优化
可以通过如下方法来优化查询的:
(1) 把数据、日志、索引放到不同的I/O设备上,增加读取速度。数据量越大,提高I/O越重要。
(2) 纵向、横向分割表,减少表的尺寸
(3) 根据查询条件,建立索引,优化索引、优化访问方式,限制结果集的数量量。注意填充银子要适当(最好使用默认值0)。索引应该尽量的小,使用自己数小的列建索引好,不要对涌现的几个值的列建立单一索引。
(4) 用OR的子句可以分解成多个查询,并且通过UNION 连接多个查询。它们的速度只与是否使用索引有关,如果查询需要用到联合索引,用UNION ALL执行的效率更高。
(5) 在查询SELECT语句中庸WHERE子句限制返回的行数。避免表扫描。如果返回不必要的数据,浪费了数据库的I/O资源,加重了网络的负担,降低了性能。如果表很大,在表扫描的期间将表锁住,禁止其他的连接访问表,后果很严重。
(6) 注意,在没有必要的时候不要用distinct,它同union一样会使查询变慢。
(7) 在IN后面值得列表中,将出现最频繁的值放在最前面,出现得最少的放在最后面,减少判断的次数。
(8) 一般在 groupby 和 having 子句之前就能剔除多余的行,所以尽量不要用她们来执行剔除工作。
(9) 尽量将数据的处理工作放在服务器上,减少网络的开销,如使用存储过程。存储过程是编译好的,优化过的,并且被组织到一个执行规划里,且存储在数据库中的SQL语句,是控制流语言的集合,速度当然快。

(10) 不要再一句话里再三地使用相同的函数,浪费资源,将结果放在变量里再调用更快。

另外,还可以针对大量只读查询操作进行优化,常见的方法有:

(1) 数据量教教的数据,可以考虑不存储在数据库中,而是通过程序常量的方法解决。

(2) 需要存储在数据库中的数据,可以考虑采用物化视图(索引视图)。当database administrator在视图上创建索引时。这个视图就被物化(执行)了,并且结果集被永久地保存在唯一聚簇索引中。

(3) 数据存储时可以考虑适当的数据冗余,以减少数据库表之间的连接操作,提高查询效率。

(4) 针对数据的特点,采取特定的索引类型,例如位图索引等。

个人遇到过的问题


第二种查询速度比第一种快

怎样提高数据库查询效率相关推荐

  1. sql语句提高数据库查询效率

    可以通过以下多个方面优化sql语句提高数据库查询效率 1. 应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放弃使用索引而进行全表扫描. 2. 应尽量避免在 where 子 ...

  2. 提高数据库查询效率的八个方法

    当用户在一张大表中采用这个LIKE语句的话,就会发现这个查询语句的运行效率非常的慢.这是什么原因造成的呢?其实,不管是Like 关键字,若采用MATCHES关键字的话,若在大量数据中查找符合条件的记录 ...

  3. [转]详细讲解提高数据库查询效率的实用方法、外键关于性能

    1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...

  4. 提高数据库查询效率的方法

    优化数据库设计 1.数据字段类型使用varchar/nvarchar 替换 char/nchar,变长字段存储空间小,节省存储空间.在查询的时候小的空间字段搜索效率更高. 2.查询的时候避免全表扫描, ...

  5. 提高MySQL数据库查询效率的几个技巧(转载)

    [size=5][color=Red]提高MySQL数据库查询效率的几个技巧(转)[/color][/size]       MySQL由于它本身的小巧和操作的高效, 在数据库应用中越来越多的被采用. ...

  6. 提高数据库查询速度的几个思路

    提高数据库查询速度的几个思路 : 1.缓存,在持久层或持久层之上做缓存; 2.数据库表的大字段剥离,保证单条记录的数据量很小;  3.恰当地使用索引; 4.必要时建立多级索引;  5.分析Oracle ...

  7. 基于springboot项目中使用docker-compose+es+kibana+logstash+mysql 提高数据查询效率

    基于springboot项目中使用docker-compose+es+kibana+logstash+mysql 提高数据查询效率 1.拉取logstash,kibana,es,mysql镜像 #命令 ...

  8. SQL查询优化方法 提高SQL查询效率 数据库的哪些字段适合添加索引

    如何提高sql的查询效率 在正确的字段上创建索引. 优化查询sql的写法(特别是where语句的写法). 一.数据库的哪些字段适合添加索引 表的某个字段值得离散度越高,该字段越适合选作索引的关键字.主 ...

  9. mysql处理上百万条的数据库如何优化语句来提高处理查询效率

    1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...

  10. 提高oracle查询效率

    转载自: http://zhidao.baidu.com/link?url=E_HaRWGF3wCYYKG1l-qg5pNmjsePoH3wo_81Zpf5GaytfIW869RhWTIR6_jGPh ...

最新文章

  1. 观点丨机器学习未必是人工智能 未必依赖于大数据
  2. 在Android工程中加入AIDL文件时,gen目录生成的文件报错-问题解决
  3. VB.Net to C Sharp Converter有用吗?
  4. bzoj3410[Usaco2009 Dec]Selfish Grazing 自私的食草者*
  5. 脑裂问题解决方案_从解决方案到问题
  6. 在WildFly的REST Web服务中与Jackson的双向关系
  7. Win7 64有点找不到MSVCP71.DLL和MSVCR71.dll
  8. Implementation of the USB 3.0 controller not found!
  9. python常用模块-time和datatime
  10. SQL Server 数据库角色简介
  11. 【codevs1078】最小生成树
  12. 使用c++实现一个FTP客户端(一)
  13. DSP 6678的NETCP
  14. python 钉钉导出Excel考勤统计
  15. Arduino servo库函数说明(舵机函数库)
  16. Matlab中关于复杂函数二重积分的问题
  17. input输入框只能输入字母
  18. 【Ajax】第一节 初始Ajax
  19. 用手机也能轻松玩转MATLAB编程
  20. Python基础学习之列表操作

热门文章

  1. opencv Python 图片颜色识别
  2. ArrayList 源码分析 -- 扩容问题及序列化问题
  3. 使用管理员权限强制删除文件夹
  4. cad一键卸载工具叫什么_CAD专用卸载修复工具,一键完全彻底卸载删除CAD软件的专用卸载工具...
  5. 阿里云无影云桌面初体验
  6. 当代体育杂志当代体育杂志社当代体育编辑部2022年第24期目录
  7. 【Leccture 4.1】Classes and Objects - the Basics
  8. dalek-cryptography 与adjoint-io bulletpoofs性能对比
  9. 改图宝,快速修改图片大小
  10. 现在公开一个DHT网络爬虫网络爬虫供大家一起交流