Парсер вики и импорт в бд

  • Автор темы Автор темы Wide
  • Дата начала Дата начала

Wide

Client
Регистрация
04.02.2013
Сообщения
970
Реакции
262
Баллы
63
Сам движок здесь Нужно спарсить все статьи в пределах одного поддомена. Остальное в лс. Здесь не чего обсуждать.
 
Какой под домен? fr.wiki или de.wiki? Вы представляете себе сколько весит одна такая база?
Поддомен в посте. Да представляю, медия +80 гб, бд меньше будет, но утверждать не буду, будет ясно только после наполнения.
 
Поддомен в посте. Да представляю, медия +80 гб, бд меньше будет, но утверждать не буду, будет ясно только после наполнения.
80гб бывает с 10 тысячами новостями на сайте.На этом движке нет базы данных, там все в файлах храниться.
 
80гб бывает с 10 тысячами новостями на сайте.На этом движке нет базы данных, там все в файлах храниться.
Пзд... рука лицо, ты хоть ссылку что ли бы открыл, прежде чем утверждать) Тема для предложений а не обсуждений...
 
Актуально...
 
Парсим ссылки со старт страницы. Скачиваем движок, разбираемся со связями. Добавляем в бд статью с разметкой, шаблоны из статьи, категории. Скачиваем медиа. Получаем 15К.
 

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)