表结构如下:
CREATE TABLE `deviceback` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`imei` varchar(100) NOT NULL COMMENT '手机唯一标识',
`mid` varchar(50) DEFAULT NULL,
`mac` varchar(100) DEFAULT NULL,
`APNType` varchar(100) DEFAULT NULL,
`status` int(11) DEFAULT '0',
`ip` varchar(100) DEFAULT NULL,
`sn` varchar(100) DEFAULT NULL COMMENT '系列号',
`oem` varchar(100) DEFAULT NULL COMMENT '厂商',
`product` varchar(100) DEFAULT NULL COMMENT '产品',
`region` varchar(100) DEFAULT NULL COMMENT '区域',
`operator` varchar(100) DEFAULT NULL COMMENT '运营商',
`sim` varchar(100) DEFAULT NULL COMMENT 'sim卡号',
`push_time` timestamp NULL DEFAULT NULL COMMENT '第一次登陆时间',
`origin_version` varchar(100) DEFAULT NULL COMMENT '原始版本',
`province` varchar(100) DEFAULT NULL COMMENT '省份',
`provinceCode` varchar(100) DEFAULT NULL COMMENT '省份code',
`city` varchar(50) DEFAULT NULL COMMENT '城市',
`cityCode` varchar(50) DEFAULT NULL COMMENT '城市code',
`brands` varchar(50) DEFAULT '0',
`version` varchar(100) DEFAULT '0' COMMENT '客户端版本号',
`last_checktime` timestamp NULL DEFAULT NULL COMMENT '最后一次登录时间',
PRIMARY KEY (`id`),
FULLTEXT KEY `NewIndex1` (`imei`),
FULLTEXT KEY `NewIndex2` (`mid`),
FULLTEXT KEY `NewIndex3` (`product`),
FULLTEXT KEY `NewIndex4` (`brands`)
) ENGINE=MyISAM AUTO_INCREMENT=6832460 DEFAULT CHARSET=utf8;
CREATE TABLE `20130602_AppLog` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`imei` varchar(100) DEFAULT NULL,
`mid` varchar(50) NOT NULL DEFAULT '',
`status` char(1) NOT NULL DEFAULT '0',
`mac` varchar(100) DEFAULT 'NULL',
`sn` varchar(100) DEFAULT NULL,
`sim` varchar(100) DEFAULT NULL,
`coperator` varchar(100) DEFAULT NULL,
`version` varchar(100) DEFAULT NULL,
`logintime` datetime DEFAULT NULL,
`ip` varchar(20) DEFAULT NULL,
`origin_version` varchar(100) DEFAULT NULL,
`now_version` varchar(100) DEFAULT NULL,
`APNType` varchar(20) DEFAULT NULL,
`oem` varchar(20) DEFAULT NULL,
`product` varchar(100) DEFAULT NULL,
`region` varchar(100) DEFAULT NULL,
`operator` varchar(100) DEFAULT NULL,
PRIMARY KEY (`id`),
FULLTEXT KEY `NewIndex1` (`imei`),
FULLTEXT KEY `NewIndex2` (`mid`)
) ENGINE=MyISAM AUTO_INCREMENT=3123866 DEFAULT CHARSET=utf8;
SQL如下:
SELECT *
FROM deviceback d,20130602_AppLog g
WHERE d.mid=g.mid
AND d.imei=g.imei
AND d.mac=g.mac
AND d.brands=0
AND g.coperator <> '' limit 20;
explain
结果:
从这里可以看到ALL以及key为NULL,就是全表扫描,没有走索引,索引失效了!
1 然后我建议建上加上联合索引,试试看效果如何:
2 效果还是比较慢的,看来得换种办法了,检查所有关联字段,将为null的数据改成''。还是没有效果。
3 不查*了,直接count(*) 看看结果集大小,结果还是卡住了,短时间内没有出查询结果。
4,到这里我猜测估计是数据的构成问题,那就一个个条件去掉去尝试了。
SELECT*
FROMdevicebackd,20130602_AppLogg
WHEREd.mid=g.mid
ANDd.imei=g.imei
ANDd.mac=g.mac
ANDd.brands=0limit20;
去掉<>条件试试看,God,结果是37秒就出来了,好,大概问题找到了,出在<>这条判断语句里面,也就是
AND g.coperator <> '' 这个影响还蛮大的。
那就先在20130602_AppLog表的coperator字段单独建索引试试看,然后查下20130602_AppLog里面g.coperator<>''的有多少?
结果是比较令人欣慰的,单独查询,一秒不到出来结果了,6W多条纪录。
SELECT COUNT(1)
FROM 20130602_AppLog gg
WHERE gg.coperator <> ''
63987
然后再试试整个sql,看需要多长时间。
先看下explain结果:
SELECT *
FROM deviceback d,20130602_AppLog g
WHERE d.mid=g.mid
AND d.imei=g.imei
AND d.mac=g.mac
AND d.brands=0
AND g.coperator <> '' limit 20;
Great,不到3秒就出来结果了。
5,limit 20是OK了,我还想试试不限制limit的话,要多久可以查询出来结果。
直接执行
SELECT *
FROM deviceback d,20130602_AppLog g
WHERE d.mid=g.mid
AND d.imei=g.imei
AND d.mac=g.mac
AND d.brands=0
AND g.coperator <> '' ;
卡住了,很久都没有出来结果,在想是否是数据的问题?切换下where条件后面的字段顺序试试看。
SELECT d.mid,g.mac,
FROM deviceback d,20130602_AppLog g
WHERE
d.imei=g.imei
AND d.mac=g.mac
AND d.mid=g.mid
AND d.brands=0
AND g.coperator <> '' ;
OK,27秒出来了,AND d.mid=g.mid这个之前在第一条,现在放在后面,原因是手机唯一标示这个字段有空值。
God,最讨厌关键业务字段null值了,给我们的优化工作带来巨大的烦恼。
切记:大家以后千万要记住关键业务字段不能允许录入null值。
分享到:
相关推荐
经典的关联语句经典的关联语句经典的关联语句经典的关联语句经典的关联语句
在VC++6.0中利用Acess数据库关联多张表
2张表数据匹配更新
activiti 5.22.0 版本 23张表 增加注释脚本 部分字段是空
SQL实现两张无关联表的数据列合并在一张结果集中实现思路。
Sql语句用left join解决多表关联问题(关联套关联,例子和源码)一看就明白多表关联如何写SQl语句
完整的erp数据库sql,共82张表
全国省市区3级 3张表的创建文件,可直接在MSSQL数据库创建生成表。
中国省市县三级数据库表SQL完美版
该资源是oauth2的内置表结构,其中有7张表,分别是clientdetails、oauth_access_token、oauth_approvals、oauth_client_details、oauth_client_token、oauth_code、oauth_refresh_token,仅支持mysql。
有时候,我们的业务可能会这样要求:某张表是动态的,他要求每隔一段时间(如:一个月)自动生成一张结构相同的新表(如:日志表Log),这是我们要判断数据库中是否存在某张表,如果没有,则新建一张表,否者直接...
非常适合初学者的activiti23张表相互关系图,你还在为初学activiti时,23张表各个Id间对应关系晕头转向吗,有了这张图,一目了然。
mes四张表sql.zip
如何连接2如何连接2个数据库合并2张表如何连接2个数据库合并2张表如何连接2个数据库合并2张表如何连接2个数据库合并2张表如何连接2个数据库合并2张表如何连接2个数据库合并2张表个数据库合并2张表
单表统计可能只要0.02秒,但是2张表联合统计就可能要几十表了. 这是因为ORACLE只对简单的表提供高速缓冲(cache buffering) ,这个功能并不适用于多表连接查询..数据库管理员必须在init.ora中为这个区域设置合适的参数,...
一条sql语句关联八个表,希望对你有所帮助!!
主要介绍了SQLServer批量更新两个关联表数据的方法,提供了2种关联查询与更新语句的使用技巧,具有一定参考借鉴价值,需要的朋友可以参考下
HeidiSQL非常好用的管理软件,可以查看表的数据大小
sap 80000多张表1. rar
实现多表更新,尤其是A表和A的...A.c1与B.c1相等,用一条sql语句,实现A.c2的值更新为B.c3 ————————————————————————————— 语句一 UPDATE A SET A.c2 =B.c3 from A ,B where A.c1=B.c