Парсинг сайтов с разными кодировками

Mandyson

Client
Регистрация
03.06.2012
Сообщения
410
Благодарностей
84
Баллы
28
Необходимо написать парсер, который берет посты с движков форумов.
При парсинге получается ��� � ����� или Моделизм.
Соответственно сайты в кодировке windows-1251 или utf-8.
Как сделать определялку кодировки?
 

Mandyson

Client
Регистрация
03.06.2012
Сообщения
410
Благодарностей
84
Баллы
28
тыц - пример где сохраняет в первой и пых для второй
 

Nord

Client
Регистрация
22.03.2012
Сообщения
2 404
Благодарностей
1 471
Баллы
113
Познания а хтмл не много, но может попробовать сначала найти эту строку " content="text/html; charset=utf-8" "?
 

Mandyson

Client
Регистрация
03.06.2012
Сообщения
410
Благодарностей
84
Баллы
28
мм.. точно, главное мысль была
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)