(1).首先我们需要了解limit分页的工作流程
demo: SELECT * FROM table LIMIT 10000,5
通常我们会认为以上SQL会从10000条后面取5条,正确的是取出10005条,然后再抛弃前面的10000条.随着分页的增加内存消耗越高
eg:
SELECT * from user` LIMIT 0,10 (执行查询用时0.001s) SELECT * from user` LIMIT 200000,10 (执行查询用时0.035s) SELECT * from user` LIMIT 20000000,10;(执行查询用时2.451s)
(2).解决方法:
2.1.限制总分页数,例如百度限制最多76页.历史数据需要查询可以做站内筛选。
2.2.
SELECT * from `user` where id>20000000 limit 10(执行查询用时0.001s) //2000W查询
本方法缺点是id中间必须保证连续性,删除数据时候做逻辑删除即可.否则id不连续很尴尬
2.3.
(2.3.1).select * from user limit 40000001,3;(原始方式4.9s) (2.3.2).SELECT * FROM user as a INNER JOIN (SELECT id FROM user limit 4000001,3) as b on a.id= b.id;(新方法0.5s) //2.3推荐的方法,4000w查询 0.5s
本方法解决了id不连续的问题,可以真实删除数据
我们要明白Mysql字段的长度能存多少东西,首先需要明白Mysql是计算字节长度,还是计算字符长度。在mysql4.x的版本长度代表的是字节长度.例如在mysql4.x的版本中varchar(10)能储存的中英文长度如下:(1).采用ISO8859-1编码方式时,一个中/英文都只占一个字节;(2)....
有很多集成环境安装完成之后是没有快捷方式的,例如西部数码的网站管理助手4.0,、 更或者是护卫神PHP套件都是一样的。安装完成最多给你安装一个PhPmyadmin让你管理Mysql,但是对于经常使用命令行的我们来说是非常不方面的,而且还必须安装PhPmyadmin来管理。下面就让我们自己手...
项目和第三方系统对接,由于第三方开发人员属于兼职,数据库结构不一致的问题只能我来处理。此处文章用本地模拟演示。数据库资料:1号服务器: 账号root 密码root IP:127.0.0.1 数据库名称:data1 2号服务器...
海量表,数据量较大,并且每个字段的值具有唯一性。如果你创建的海量表只是数据多,索引是毫无意义的。构建海量时我们要使用存储过程。学习自韩顺平(1).创建一个测试数据库create database testdb;set names gbk;use testdb(2).创建dep...
在项目中发现大量的form连接表,就开始质疑inner join 和 form a,b的性能问题。找到一份有价值的资料,特别记录:ANSI SQL规范首选INNER JOIN语法。此外,尽管使用WHERE子句定义联结的确比较简单,但是使用明确的联结语法能够确保不会忘记联结条件,有时候这样做也能影响性...