MySql如何分级查询上千万行记录的表,并将该大数据显示到界面中
2015-06-04 14:48
501 查看
由于项目需要遇到如下问题:
人机界面程序要查看数据库中的数据,其中有个表的数据已经有上千万行了,要一次加载并显示在界面上估计要消耗要好几个GB的内存,所以考虑采用分页查找的方式。
具体解决方案:
1,查找总共有多少行rowcount,采用如下的查询语句:
select count(*) from tableName
另外information_schema库中的Tables表中,也能够查询到所需表的行数,但查询到的只是个近似的行数,不精确,但这样查找的话效率会高很多。
2,规定每页显示n行,并计算出总共需要显示多少页
3,一次只查询一页的数据,比如第m页,查询语句如下:
select * from tablename limit (m-1)*n,n
仍然存在的问题:
1,select count(*) from tableName的效率有点第,得需要10s以上
2,当查询后面的页的数据时,效率较低,大约需要几十秒
人机界面程序要查看数据库中的数据,其中有个表的数据已经有上千万行了,要一次加载并显示在界面上估计要消耗要好几个GB的内存,所以考虑采用分页查找的方式。
具体解决方案:
1,查找总共有多少行rowcount,采用如下的查询语句:
select count(*) from tableName
另外information_schema库中的Tables表中,也能够查询到所需表的行数,但查询到的只是个近似的行数,不精确,但这样查找的话效率会高很多。
2,规定每页显示n行,并计算出总共需要显示多少页
3,一次只查询一页的数据,比如第m页,查询语句如下:
select * from tablename limit (m-1)*n,n
仍然存在的问题:
1,select count(*) from tableName的效率有点第,得需要10s以上
2,当查询后面的页的数据时,效率较低,大约需要几十秒
相关文章推荐
- LightOJ - 1038 Race to 1 Again 递推+期望
- poj2709Painter
- IBM aix资料
- 2 walks Once again
- HDFS为什么使用大块,如64MB,以及推荐流方式访问文件
- CSUOJ 1637 Yet Satisfiability Again!
- 3大数据库(Sql-Server,MySql和Oracle)的分页SQL语句实现
- 云计算系统测试之技术概念
- Gmail架构相关资料收集
- 简单的介绍人工智能的机器学习
- 简单的介绍人工智能的机器学习
- pthread_cond_wait()
- Opencv研读笔记:haartraining程序之cvCreateMTStumpClassifier函数详解~
- 云计算技术
- OAI编译EPC流程
- hdfs指令集
- Go中iota是什么
- SAI教程,真人照片转手绘
- Algorithms—70.Climbing Stairs
- IDF实验室之初探乾坤Fuck you brain