Парсинг в объемном тексте

[gevolushn]

Здравствуйте.
При парсинге регуляркой в объемном тексте, процесс занимает внушительное время (относитильно). Получаю get-запросом страницу, а оттуда вытягиваю нужные данные. Естественно мне нужно парсить не с одной страницы, а с пару тыщ.
Есть способ это сделать быстрее? Xpath, поиск по CSS...? Не смог ничего найти
Спасибо.

 

[gevolushn]

Почему нельзя убрать префикс SOLVED? Отредактировал название блин...

 

[WebBot]

Возможно в тексте имеются признаки по которым можно вырезать значительнуые куски текста в которых совершенно точно нет искомых данных. Например, сначала страницы до какого-то места/тега и после какого-то места/тега до конца страницы искомые данные 100% не встречаются, поэтому эти куски можно удалить. А вот к куску страницы с нужнымии данными уже применить регулярки.

Ну и если нужно парсить тысячи страниц, то делать шаб многопоточным.

 

[Sergodjan]

Почему нельзя убрать префикс SOLVED? Отредактировал название блин...

Убрал.

 

[gevolushn]

Возможно в тексте имеются признаки по которым можно вырезать значительнуые куски текста в которых совершенно точно нет искомых данных. Например, сначала страницы до какого-то места/тега и после какого-то места/тега до конца страницы искомые данные 100% не встречаются, поэтому эти куски можно удалить. А вот к куску страницы с нужнымии данными уже применить регулярки.

Ну и если нужно парсить тысячи страниц, то делать шаб многопоточным.

Попробую. Спасибо. А то 7-10 секунд на одну страничку это многа, а иногда и 20 секунд
P.S. Во многопотоке и планировал работать. Надеялся ускорить чуть-чуть процесс.