sql 语句的优化问题

大约23W条数据
每条数据产生至少
3条delete，1条update
还有可能产生更多的
现在情况是执行完一条数据生成的语句需要1S左右
算下来我需要6个小时才能执行完。

单步执行结果是发现存在一个delete语句中包含了in语句需要1s，

DELETE
FROM
g_re_enterprises_types
WHERE
enterprise_id IN (
SELECT
id
FROM
g_enterprises
WHERE
enterprise_name = '广东百合医疗科技股份有限公司'
);

但是同样的另外一个delete语句中也包含了in语句却只要0.4s
DELETE
FROM
g_enterprises_certificate
WHERE
enterprises_id IN (
SELECT
id
FROM
g_enterprises
WHERE
enterprise_name = '广东百合医疗科技股份有限公司'
);

有没有什么解决的思路？
mysql Ver 15.1 Distrib 10.0.15-MariaDB, for Linux (x86_64) using readline 5.1

语句

delete

select

14 replies • 2015-01-09 09:54:37 +08:00

xiaogui

Jan 8, 2015

查看 g_re_enterprises_types 表和 g_enterprises_certificate 表数据量，以及表中 enterprise_id 字段是否有索引？

yeqiu

Jan 8, 2015

@xiaogui
索引和外键都是有的，数据量也都差不多

xiaogui

Jan 8, 2015

@yeqiu 视图呢？

yeqiu

Jan 8, 2015

@xiaogui 视图？什么意思？

msg7086

Jan 8, 2015 via iPhone

不贴个EXPLAIN？

iamshaynez

Jan 8, 2015

查看执行计划吧，认为执行计划已经比较高效，那么瓶颈基本上就在硬件上了。23w * 4+ 次执行的速度不是单靠优化SQL能解决的。

求教MSSQL用exists替换in能改善性能吗？Oracle是明显改善的，尤其是10以前的版本。

huwsun

Jan 8, 2015

考虑批量执行

omegaga

Jan 8, 2015

@iamshaynez exists和in的性能比较要看比较吧。如果你指的是
SELECT * FROM A
WHERE EXISTS (
SELECT * FROM B
WHERE A.id = B.id
)
和
SELECT * FROM A
WHERE A.id IN (
SELECT id FROM B
)
的话，通常来说是没有明显的区别的（execution plan是一样的）。
不过老的版本里IN会被翻译成一串OR。。。。。。那个性能就不能直视了

yeqiu

Jan 8, 2015

@msg7086
两个语句的explan是一样的

branchzero

Jan 8, 2015

可以考虑先把所有ID查出来汇总到一块儿去重，然后一次性喂DELETE？

yuankui

Jan 8, 2015

1. 那里来的update？
2. 这种语句在什么场景下执行？每个请求一次？每天一次？如果每天一次，几秒都是可以接受了，在怎么优化有没有多大收效
3. 有些东西不是单单通过优化sql可以解决的，换个思路。比如把数据全部dump出来，然后分析，然后再喂回去。某些场景下效率会高很多。

mkeith

Jan 8, 2015

2个表的数据量不一样吧？

jc4myself

Jan 9, 2015 via iPad

看一下开查询缓存没，或者执行两次同一条select

thinkmore

Jan 9, 2015

DELETE
FROM
g_re_enterprises_types
WHERE
enterprise_id exists (
SELECT
id
FROM
g_enterprises
WHERE
enterprise_name = '广东百合医疗科技股份有限公司'
);

我们几百万上千万数据都很快出来，你的为什么会这么慢呢？你explain试一试