(1).首先我们需要了解limit分页的工作流程
demo: SELECT * FROM table LIMIT 10000,5
通常我们会认为以上SQL会从10000条后面取5条,正确的是取出10005条,然后再抛弃前面的10000条.随着分页的增加内存消耗越高
eg:
SELECT * from user` LIMIT 0,10 (执行查询用时0.001s) SELECT * from user` LIMIT 200000,10 (执行查询用时0.035s) SELECT * from user` LIMIT 20000000,10;(执行查询用时2.451s)
(2).解决方法:
2.1.限制总分页数,例如百度限制最多76页.历史数据需要查询可以做站内筛选。
2.2.
SELECT * from `user` where id>20000000 limit 10(执行查询用时0.001s) //2000W查询
本方法缺点是id中间必须保证连续性,删除数据时候做逻辑删除即可.否则id不连续很尴尬
2.3.
(2.3.1).select * from user limit 40000001,3;(原始方式4.9s) (2.3.2).SELECT * FROM user as a INNER JOIN (SELECT id FROM user limit 4000001,3) as b on a.id= b.id;(新方法0.5s) //2.3推荐的方法,4000w查询 0.5s
本方法解决了id不连续的问题,可以真实删除数据
1.定长和变长的分离 如int,char,time所占字节是固定的字段放在一张表 如varchar,text所占字节不确定的字段放在一张表中2.常用字段和不常用字段进行分离,根据查询频率来设计3.一对多的关联表可以添加冗余字段,如商品分类表 和商品表 ,在首页中需要显示每个分类商...
下面的是商品数据表,id是主键,catename是分类,titile是标题,price是价格,现在要求计算每种分类下的商品平均价格.id catename &n...
需求查询出存在商品的商品分类. 先看看分类表:id(分类的id) catename(分类名) 1 手机 2 &n...
1.floor(x)返回小于x的整数,向下取整,用法,商品的价格是浮点型的,需要向下取整 eg:select id,title,floor(price) from shopgoods2.rand()返回0-1之间的随机数 select rand() select rand()...
项目和第三方系统对接,由于第三方开发人员属于兼职,数据库结构不一致的问题只能我来处理。此处文章用本地模拟演示。数据库资料:1号服务器: 账号root 密码root IP:127.0.0.1 数据库名称:data1 2号服务器...
海量表,数据量较大,并且每个字段的值具有唯一性。如果你创建的海量表只是数据多,索引是毫无意义的。构建海量时我们要使用存储过程。学习自韩顺平(1).创建一个测试数据库create database testdb;set names gbk;use testdb(2).创建dep...