Нужно сниппетом удалить из списка несоответствия

[backoff]

Хай, есть задача, с которой зенка в стандартных кубиках не справляется, или тратит на это неприлично много времени.

Есть большая база данных, нужно из этой базы удалить все строки не соответствующие условию.
Не знаю поможет ли сниппет в этом, база очень большая, делить на части ее еще тот гемор.

В зенке удаляю такой регуляркой

(условие1|условие2|условие3|условие4)

ну и все виснет в принципе ну не виснет, просто работает ну очень долго, что просто не дожидаюсь и закрываю принудительно.

поможет ли сниппет в этом случае?

 

[inotoxic]

У вас в примере четыре условия
Удаляйте отдельными запросами к БД - условия в цикл

 

[backoff]

так не прокатит, удалив по одному условию, удалятся остальные 3
пытался вытащить по одному условию в отдельный список, но там тоже "зависания"

 

[inotoxic]

Чет какая-то логика не понятная
Если как вы говорите

удалив по одному условию, удалятся остальные 3

получится, что база - обработана
Возможно не правильно условие составлено?

 

[backoff]

Чет какая-то логика не понятная

что непонятного?

есть база

условие1
условие2
условие3
условие4
условие5
условие6
условие7

надо чтоб в бд остались все строки с условиями 1.2.3.4

нужно из этой базы удалить все строки не соответствующие условию

то есть я удаляю все строки которые НЕ соответствуют условию

то есть если я впишу условие "условие1" то удаляться все услови и останется только "условие1"
а мне надо чтоб остались еще 2.3.4

 

[backoff]

более наглядно

есть бд

123@mail.ru
123@inbox.ru
123@bk.ru
123@list.ru
123@yandex.ru
123@gmail.com

надо удалить все кроме mail inbox list bk

 

[inotoxic]

Ну так составь запрос к БД
точный синтаксис не помню

DELETE `столбец с значением`
FROM `таблица БД`
WHERE `столбец с значением`== '1-е условие'
AND`столбец с значением` != '2-е условие'
AND`столбец с значением` != '3-е условие'
AND`столбец с значением` != '4-е условие'

вместо !=
попробовать операторы LIKE и REGEXP

 

[backoff]

а если бд это текстовый файл )

 

[inotoxic]

а если бд это текстовый файл )

Двумя запросами:
-первый создать БД
-второй импортировать данные из текстовика )

 

[backoff]

а как вытащить все строки где есть @mail.ru ?

 

[inotoxic]

синтаксис может быть не точный

SELECT (*)
FROM `таблица БД`
WHERE `столбец` REGEXP '\@mail.ru'

или
SELECT (*)
FROM `таблица БД`
WHERE `столбец` LIKE '%@mail.ru%'

 

[backoff]

или
SELECT (*)
FROM `таблица БД`
WHERE `столбец` LIKE '%@mail.ru%'

ага тоже нашел про LIKE

выглядит так, если кому-то надо будет

SELECT `mail` FROM `mails` WHERE `mail` LIKE '%@mail.ru%' LIMIT 0, 100

 

[inotoxic]

Так и что в итоге?
БД по условиям обрабатывается быстрее ? или нет ?

 

[backoff]

настраиваю.

просто тут зенка брала и пыталась обработать 5млн строк, а тут будет делать выборка по 100
короче на все надо куча времени

 

[inotoxic]

Опять не понятно
В самом начале нужно было удалить по условию
Сейчас делаете выборку с лимитом
Почему сразу не удалить по условию?

 

[backoff]

ага, немного затупил, щас просто бекап создам

 

[backoff]

короче пытаюсь удалить ненужное, не получается пробовал эти запросы, они выводят все равно всю базу

SELECT * FROM mails WHERE mail not like '%mail.ru%' or mail not like '%inbox.ru%' or mail not like '%bk.ru%' or mail not like '%list.ru%'

SELECT * FROM mails WHERE mail not REGEXP 'mail.ru' or mail not REGEXP 'inbox.ru' or mail not REGEXP 'bk.ru' or mail not REGEXP 'list.ru'

может можно как-то по одному запросу перенести в другую базу?
ну то есть, сделать отдельную базу новую и запросом сначала mail перенести пото list и тп ?

ps \ select это для теста посмотреть что выбирает при этом

 

[inotoxic]

Как-то так

 

[backoff]

мне надо удалить все КРОМЕ 4 пунктов, уже не знаю как донести
короче чтобы в базе остались только емайлы от майл ру

 

[inotoxic]

Епрст...
в самом начале писал...

ладно
так выборку получишь всех, кроме "@mail.ru"

SELECT *
FROM mails
WHERE `mail` NOT LIKE '%@mail.ru%'

так удалишь всех, кроме "@mail.ru",

DELETE `mails`
FROM mails
WHERE `mail` NOT LIKE '%@mail.ru%'

 

[kapelan28]

мне надо удалить все КРОМЕ 4 пунктов, уже не знаю как донести
короче чтобы в базе остались только емайлы от майл ру

надо подключить БД к MS Access и там через конструктор запросов создать запрос, который будет выполнять нужную операцию. У @sibbora в Академии этот момент хорошо рассмотрен. Может, и на ютубе есть уроки...

 

[backoff]

я в самом начале написал

не соответствующие условию

и само условие написал

(условие1|условие2|условие3|условие4)

так удалишь всех, кроме "@mail.ru",

да это я уже понял

как мне НЕ УДАЛИТЬ inbox list и bk

я же пишу запрос, по нему же понятно что мне надо

SELECT * FROM mails
WHERE mail
not like '%mail.ru%' 
or mail not like '%inbox.ru%' 
or mail not like '%bk.ru%' 
or mail not like '%list.ru%'

 

[inotoxic]

DELETE `mails`
FROM mails
WHERE `mail` NOT LIKE '%@mail.ru%'
AND `mail` NOT LIKE '%@yandex.ru%'
AND `mail` NOT LIKE '%@list.ru%'

 

[inotoxic]

надо подключить БД к MS Access и там через конструктор запросов создать запрос, который будет выполнять нужную операцию. У @sibbora в Академии этот момент хорошо рассмотрен. Может, и на ютубе есть уроки...

Тяжеловеса Acces подключать, что-бы работать с конструктором запросов?
Не надо так.
heidisql - из пакета open server - вполне хватает. в нем есть вкладка для составления запросов.

 

[backoff]

методом тыка подобрал
как раз получилось как ты написал

SELECT * FROM mails
WHERE mail
not like '%mail.ru%' AND
mail not like '%inbox.ru%' AND 
mail not like '%bk.ru%' AND 
mail not like '%list.ru%'

работает как надо

heidisql

тоже ей пользуюсь, классная прога

 

[kapelan28]

heidisql - из пакета open server - вполне хватает

в open server добавили heidisql? давно уже не обновлял софт... да и OS в расширенном виде весить стал много.

 

[inotoxic]

тоже ей пользуюсь, классная прога

вот еще dbForge Studio for MySQL - бесплатно и по русски для некоммерческого использования

 

[inotoxic]

OS в расширенном виде весить стал много.

Базовый 5.2.8 ~ 350 мб