文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > IT/计算机 > 海量数据详解、查询优化
侵权投诉

海量数据详解、查询优化

海量数据详解、查询优化

当我们对一张数据表进行查询时,数据表中的数据量如果很大,比如有几百万条记录时,那么就要考虑如何能够使查询具有更高的效率了。

针对大数据量的数据进行查询时,如果查询的速度比较慢,那么我们就要分析问题到底出现在什么地方,了解慢的原因,才可以针对慢的因素进行处理。

一般情况下查询速度慢的原因

硬件设备方面的原因

1. IO吞吐量小,形成了瓶颈,即磁盘与内存等之间的读写效率。 2. 供SQL Server使用的内存不足或CPU主频低。 3. 网络速度慢等。

应用程序方面的原因

1. 查询语句中的条件语句没有设计好。 2. 一次性查询的数据量过大。

3. 查询结果中包含了很多不需要的列或行。 4. 查询算法设计不合理。

5. 没有为数据表建索引或者没有用到索引,或索引不是有用的索引,或在不该建索引

的列上创建了索引,或没有按需建索引以及查询时用到了不该用到的索引。这是查询中导致速度慢的最常见的原因。 6. 锁机制的应用不当或发生死锁等。

对于硬件的问题的解决

1. 把数据、日志、索引分别放到不同的I/O设备上,增加读取速度。数据量越大,提

高I/O性能越重要。

2. 增加服务器内存及虚拟内存,SQL Server2005能支持4-8G的内存,在数据读取的过

程中,会占用大量的内存,如果内存过小,很多执行计划及数据将无法进行很好的缓存处理,所以执行速度也会急剧下降。

3. 采用主频高的CPU及多核处理器,在SQL Server2005中,数据提取的过程中,涉及

到很多并行度的计算,如果采用多核处理器,会在并行度计算方面有很大的提升。 4. 提高网速等。

上一页第2页

你可能喜欢

  • 百度数据
  • 海量数据处理
  • 数据处理方法
  • 数据资料
  • SQL数据库查询
  • 执行计划
  • oracle分区表

热门文档

相关文档

  • 企业海量数据查询优化

    海量数据详解、查询优化 31页 1下载券 面试题目-大数据量海量数... 19页 ...Keywords: Optimize the Query; Index; SQL Statements 企业海量数据查询优化丁 ...

  • 百万数据查询优化海量数据查询优化

    百万数据查询优化海量数据查询优化_IT/计算机_专业资料。索引并不是越多越好,...前面提到优化器,详解: 前面提到优化器,详解: 优化器 SERVER 误解。比如: ...

  • 海量数据优化查询

    海量数据查询优化(精) 2009-03-20 01:36 这是我面试的一家数据维护业务公司的面试题, 虽然这个职位并不是我所期望的 Java 开发的工作,自己还是想把握好每一...

  • 海量数据查询优化

    海量数据查询优化 隐藏>> 数据库优化查询计划的方法 数据库系统是管理信息系统的核心,基于数据库的联机事务处理(OLTP)以及联机 分析处理(OLAP)是银行、企业、政府...

  • 海量数据查询优化—资料1

    海量数据的查询优化 CREATE TABLE [dbo].[TGongwen] ( --TGongwen 是红头...笔者希望能够通过对以上存储过程的解析,能给大家带来一定的启示,并给 工作带来...

  • 海量数据查询优化

    海量数据查询优化海量数据查询优化隐藏>> 海量数据查询优化 目录 1 2 3 概要... 3 分析问题......

  • 海量数据库查询优化研究

    2010 海量数据库查询优化研究毛 杰,佘名高 (武汉理工大学 计算机学院,湖北 武汉 430070 )摘要:随着网络技术飞速发展,海量数据已随处可见并且不断增长 ,现有的查询...

  • 海量数据库查询优化研究

    海量数据库查询优化研究 随着网络技术飞速发展,海量数据已随处可见并且不断增长,现有的查询处理技术在应用于海量数据时已经显现出种种不足。以海量数据所处的复杂...

  • 海量数据查询优化

    海量数据库查询优化研究 4页 免费 海量数据详解、查询优化 31页 1财富值 马... 1.合理使用索引 . 索引是数据库中重要的数据结构, 它的根本目的就是为了提高...

  • 海量数据库的查询优化研究及实现

    瓶颈所在.并结合电信、银行等大型企业的实际硬件背景,提出了一种基于数据库文件分段的海量数据库查询优化策略,并对其进行了实现.实验结果表明此海量数据库查询的优化....

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email