[SOLVED] Сделать бы парсер названий веток нашего сообщества и упорядочить сначала один раздел))

[smartwisard]

Работа, конечно, более, чем значительная — по словам суметь упорядочить, соединить названия веток и не только.
Однако тот, кто сделает такую работу(потому как именно здешний форум легко упорядочить), затем сможет упорядочивать и другие форумы, сообщества, объёмы накопленного беспорядка данных на личных вычислительных устройствах и пр..
Продать такой шаблон можно довольно дорого и/или ооочень многим, т.к. польза описанного направления значительная.
Трудности создания такого бота видятся нескончаемыми, но именно наше сообщество может их преодолеть легко, сообща дорабатывая шаблон. Назову его the Order.

Будет хорошо вместе в данной ветке наработать, затем создать упорядочиватель.
Если у кого есть набросок шаблона, бросайте сюда в открытый доступ. Кто может — улучшайте.

 

[Эрнесто Че Гевара]

Продать такой шаблон можно довольно дорого

ну закажи у кого нибудь его потом продавай
озолотишься

 

[smartwisard]

продавай
озолотишься

Хорошо. Что примерно написать в тех. задании?

 

[Lord_Alfred]

Сложная задача, т.к. просто решая её "в лоб" - в итоге будет каша. Если пытаться как-то структурировать без применения хотя бы лингвистических обработок, то проще всего отталкиваться от тегов, но опять же - придется делать очень мощный "краулер", т.к. информация имеет место устаревать, а парсить постоянно форум - ну та ещё затея )

 

[smartwisard]

Сложная задача, т.к. просто решая её "в лоб" - в итоге будет каша. Если пытаться как-то структурировать без применения хотя бы лингвистических обработок, то проще всего отталкиваться от тегов, но опять же - придется делать очень мощный "краулер", т.к. информация имеет место устаревать, а парсить постоянно форум - ну та ещё затея )

Вы по-привычке берётесь даже за сложное )) Причём называете точные пути приведения не в порядок, а вообще к совершенству )) Причём получается ))
Всё проще. Шаг за шагом.

Если, например, перебирать парсером названия веток одного раздела, начиная с последних веток, всё упрощается.
Запросто можно даже можно разбирать названия веток на отдельные слова или выражения, по которым перебирать остальные названия веток одного из разделов.
Страницы пощёлкать и названия веток собрать, затем сделать что-то наподобие AZ, перебрав ячейки таблицы. И выложить сюда, здесь улучшат быстро.
Скорее стоит задача увлечь форумчан, чтобы получился crowdsourcing.
Я новичёк с послужным списком в полшаблона(действительно всего лишь полшаблона), я могу сделать сбор названий веток, кроме первых х))

 

[Эрнесто Че Гевара]

Сложная задача, т.к. просто решая её "в лоб" - в итоге будет каша. Если пытаться как-то структурировать без применения хотя бы лингвистических обработок, то проще всего отталкиваться от тегов, но опять же - придется делать очень мощный "краулер", т.к. информация имеет место устаревать, а парсить постоянно форум - ну та ещё затея )

я кстати как то думал спарсить форум что бы прикрутить нормальный поиск
то есть спарсить целиком совсем

 

[Lord_Alfred]

Вы по-привычке берётесь даже за сложное )) Причём называете точные пути приведения не в порядок, а вообще к совершенству )) Причём получается ))
Всё проще. Шаг за шагом.

Спасибо)
Шаг за шагом - сложно, если хотите, то, конечно, пробуйте! Но, имхо, будет много ручной работы..

я кстати как то думал спарсить форум что бы прикрутить нормальный поиск
то есть спарсить целиком совсем

Недавно ведь поиск от гугла прикрутили, чтоб можно было юзать вместе со стандартным. Вообще, полнотекстовый поиск - сложная задача, даже если заюзать http://sphinxsearch.com/ или http://www.elastic.co/products/elasticsearch

 

[smartwisard]

Раздел для новичков велик. Вопросов сейчас 500 страниц, один и тот же вопрос в десятках веток, а ведь мы такое легко упорядочим.

 

[Эрнесто Че Гевара]

Спасибо)
Недавно ведь поиск от гугла прикрутили, чтоб можно было юзать вместе со стандартным. Вообще, полнотекстовый поиск - сложная задача, даже если заюзать http://sphinxsearch.com/ или http://www.elastic.co/products/elasticsearch

для поиска нужно создавать свою морфологическую базу
что то типа синонимов
экшен = сниппет = кубик = квадратик

 

[Эрнесто Че Гевара]

Раздел для новичков велик. Вопросов сейчас 500 страниц, один и тот же вопрос в десятках веток, а ведь мы такое легко упорядочим.

возьми да упорядочи.

 

[smartwisard]

Т.е. есть смысл мне создать в разделе для новичков темку "морфологическая база".
Шаг за шагом. Crowdsorcing и не такое делал.

 

[smartwisard]

возьми да упорядочи.

Точно. Я же могу создать темку и ветки одинаковые положить в одно сообщение. Рановато с моими полшаблона, но попробую.

 

[smartwisard]

возьми да упорядочи.

Вы - гений! http://zennolab.com/discussion/threads/morfologicheskaja-baza-chto-to-tipa-sinonimov-dopolnjajte-pozhalujsta.43700/

 

[Эрнесто Че Гевара]

Вы - гений! http://zennolab.com/discussion/forums/voprosy-novichkov.16/

сделай как сделал он http://zennolab.com/discussion/threads/ne-zarabatyvaem-no-uchimsja-vsemoguschestvu-s-c-90-snippetov-obnovleno.37483/
как раз конкурс