VPF::Оптимизация запроса not in (select ...

sanich_

Дата 6.11.2014, 19:16 (ссылка)

(нет голосов)

Загрузка ...

Шустрый

Профиль
Группа: Участник
Сообщений: 145
Регистрация: 2.3.2008

Репутация: нет
Всего: нет

Добрый день.
Прошу помочь в оптимизации запроса:

Код


select count(distinct(t.em)) as cr from
  (select email as em from object where email<>''
   union all
   select email as em from job_list where email<>''
   union all
   select from_email as em from send_message where from_email<>\'\'
  ) as t where t.em n

Не очень быстро работает, 2.4 сек
Проблема имеено в последней выборке

Код


as t where t.em not in (SELECT email FROM send_ignore_list_email)

Вычитал что not in можно заменить на LEFT OUTER JOIN

Сделал следующее:

Код


select count(distinct(t.em)) as cr from
 (select email as em from object where email<>''
  union all
  select email as em from job_list where email<>''
  union all
  select from_email as em from send_message where from_email<>''
) as t
LEFT OUTER JOIN send_ignore_list_email ON email=t.em where email is null

Тоже не очень быстро работает, 2.37 сек

Собственно задача из первой выборки email вычесть вторую выборку email
Помогите пожалуйста

Akina

Дата 6.11.2014, 22:27 (ссылка)

(нет голосов)

Загрузка ...

Советчик

Профиль
Группа: Модератор
Сообщений: 20581
Регистрация: 8.4.2004
Где: Зеленоград

Репутация: 106
Всего: 454

Индексов нехватает имхо. Но всё равно это хреновый запрос - подзапрос льётся во временную таблицу, фуллскан, все дела.. Кстати, если вместо UNION ALL использовать UNION - можно выкинуть DISTINCT. На скорость почти не повлияет, впрочем.

--------------------

О(б)суждение моих действий - в соответствующей теме, пожалуйста. Или в РМ. И высшая инстанция - Администрация форума.

sanich_

Дата 7.11.2014, 04:09 (ссылка)

(нет голосов)

Загрузка ...

Шустрый

Профиль
Группа: Участник
Сообщений: 145
Регистрация: 2.3.2008

Репутация: нет
Всего: нет

Цитата(Akina @ 6.11.2014, 22:27)

Чуток оптимизировал до вида:

Код


SELECT count(t.em) as cr
FROM 
(select email as em from object where email<>''
 union
 select email as em from job_list where email<>''
 union
 select from_email as em from send_message where from_email<>''
) as t
LEFT JOIN send_ignore_list_email as s ON t.em = s.email
WHERE s.email IS NULL

Стал выполнятся за 1.8 сек, а было 2.4 сек.
Но всеравно не быстро

Теперь

Код



EXPLAIN
SELECT count(t.em) as cr
FROM 
(select email as em from object where email<>''
 union
 select email as em from job_list where email<>''
 union
 select from_email as em from send_message where from_email<>''
) as t
LEFT JOIN send_ignore_list_email as s ON t.em = s.email
WHERE s.email IS NULL

Показывает следующее:

http://SSMaker.ru/1e23b31a/

Akina

Дата 7.11.2014, 08:55 (ссылка)

(нет голосов)

Загрузка ...

Советчик

Профиль
Группа: Модератор
Сообщений: 20581
Регистрация: 8.4.2004
Где: Зеленоград

Репутация: 106
Всего: 454

Цитата(sanich_ @ 7.11.2014, 05:09

)

Стал выполнятся за 1.8 сек, а было 2.4 сек.

Правильно, потому что накопление и сортировка заменились сортировкой при слиянии.

Цитата(sanich_ @ 7.11.2014, 05:09

)

все равно не быстро

Быстрее не будет. Смирись.
Либо измени структуру БД. Объяви email отдельной сущностью, выволоки в отдельную таблицу, а в таблицах object, job_list, send_message и send_ignore_list_email соответственно FK на неё. Не полетит, конечно, но разика в три ускорится.

Добавлено через 1 минуту и 2 секунды

Цитата(sanich_ @ 7.11.2014, 05:09

)

Показывает следующее:

Присоединяйте скрины к сообщению. Ссылки наружу - не лучшая практика. А EXPLAIN можно вообще цитировать с консоли.

--------------------

0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| MySQL \| Следующая тема »