Глобальная Авантюра  
ФОРУМ
главное меню
  1. >
  2. Форум >
  3. Технический раздел >
  4. Структура дерева знаний

Структура дерева знаний

←Пред←1 63  64 
 
17 декабря 2017, 20:35:41, ConstB (обновлено: 04 января 2018 18:26:19)
 
255 +4.13 / 36 Сообщение  
Подниму-ка я тему структурирования дерева дискуссий на ГА.

То что здесь обсуждалось когда-то Авантюристом ранее, давно уже не работает и не актуально. На текущий момент структура дискуссий у нас отражена в ветках форума. Но отражена коряво, непонятно и зачастую с дублированием. Иногда бывает непонятно где-что публиковать. Предлагаю прояснить текущую структуру дерева дискуссий и сопоставить с названиями веток форума.

Думаю, что нужно пройтись по разделам и идентифицировать дискурс каждой ветки. Что-то можно объединить, что-то выделить отдельно. В результате вывесить где-нибудь в качестве указателя-путеводителя, чтобы всем было понятно что-где обсуждается.

Просьба заинтересованным комрадам поучаствовать.

Например, как это могло бы выглядеть:

ЭКОНОМИЧЕСКИЙ РАЗДЕЛ

...

ПОЛИТИЧЕСКИЙ РАЗДЕЛ

Геополитика (Большой передел мира)
---- Украина (Украинско-российский отношения)
---- КНДР (Напряженность на корейском полуострове)
---- ...
Россия (Перспективы развития России) - можно переименовать ветку как общую по России
---- Внутренняя политика (Выбор России: текущая политическая ситуация)
---- ...

Важно учитывать:
* Структура относится к тредам;
* Тред можно будет публиковать в нескольких ветках (дискурсах). Например, создавая тред через новую кнопку "написать", публикацию в форуме можно будет делать выбирая в указателе дискурсов (а не заголовков веток), что на мой взгляд гораздо удобнее;
* Ветка (дискурс) может быть процессом или событием;
* Структура дискурсов будет часто меняться, исходя из появления новых процессов и событий;

Прикреплю и буду дополнять.
Отредактировано: ConstB - 17 декабря 2017 20:48:10
Сию обитель ваял холоп Константин дрянно и ленно, за что и был бит плетьми...
 
 
+ 0.00 / 0
 
 
 
26 марта 2016, 18:27:24 Сообщение удалено автором
 
+ 0.00 / 0
 
   
ахмадинежад   СССР

Профессионал

Карма: +10,747.61
Регистрация: 07.05.2009
Сообщений: 16,677
Читатели: 54

Модератор раздела
 
24 февраля 2015
Беспилотники в ночном небе всполошили парижскую полицию

Неизвестные квадрокоптеры?

Скрытый текст

 2014 год был отмечен взрывным ростом количества инцидентов с участием беспилотников, залетавших, в том числе, на территорию атомных электростанций.  В результате для усиления контроля над передвижением воздушных объектов правительство Пятой республики решило использовать военные радары.
Появление в парижском небе сразу шести беспилотников, которое следователи считают спланированной акцией, стало крупнейшим инцидентом с участием этих аппаратов. Особое внимание к неудачам полиции привлекает серия терактов, совершенных в Париже в начале января, в результате которых погибли 17 человек. Многие комментаторы в социальных сетях указывают на то, что беспилотники вполне могли быть использованы для совершения новых терактов, которые, как выяснилось, полиция была бы не в состоянии предотвратить.

ИГИЛ* готовит в странах ЕС атаки с помощью дронов
Заряд мощной взрывчатки на беспилотниках будут приводить в действие дистанционно.

Сотрудники российских спецслужб узнали о планах боевиков ИГИЛ* провести в странах Евросоюза террористические атаки с помощью беспилотных летательных аппаратов. Согласно документу, который оказался в распоряжении Лайфа, решение о подготовке резонансных "высокотехнологичных терактов" лидеры группировки приняли на совещании в сирийском городе Ракка.
По информации правоохранителей, для реализации своих планов боевики собрали отдельную команду. Часть её отвечает за исполнение терактов с использованием террористов-одиночек, другая же занимается разработкой атак с помощью летательных аппаратов. Действия и тех, и других направлены на уменьшение риска для самих боевиков погибнуть при атаках.
Планируется, что установленный на дронах заряд мощной взрывчатки будут активировать дистанционно сразу после попадания летающих машин на необходимый объект. Смена тактики — от террористов-одиночек к беспилотникам — связана с тем, что в последний год абсолютное большинство планируемых терактов с участием смертников удалось сорвать.

* Организация запрещена на территории России по решению Верховного суда.
левохристианский православный исламист
Китайская мудрость: "НИ ССЫ!!!" означает "Будь безмятежен, словно цветок лотоса у подножия храма истины"
"... только дураки учатся на своих ошибках..." Отто фон Бисмарк
+ 2.33 / 46
  Pepenec
   
   
Pepenec   Белоруссия
Брест
44 года

Специалист

Карма: +5,082.33
Регистрация: 06.05.2010
Сообщений: 6,887
Читатели: 5
 

Скрытый текст


[/quote]А если операторы этих дронов сидят в амеропосольстве?...
И пусть акулы империализма не тянут свои грязные лапы в наш советский огород! Обрубим щупальца пентагоновским ястребам!
+ 0.79 / 24
  Ketan80
   
   
Ketan80   Россия
Питер

Слушатель

Карма: +303.08
Регистрация: 26.11.2014
Сообщений: 391
Читатели: 0
 
Цитата: Цитата
А если операторы этих дронов сидят в амеропосольстве?...

Белый хозяин, он неподсуден. Так что папуасам, в которых превращается Европа, остается только утереться...
Сообщение скрыто автором
Отредактировано: Ketan80 - 31 октября 2016 14:01:42
+ 0.62 / 7
  ConstB
   
   
ConstB   Россия
Северск
37 лет

Слушатель

Карма: +140.31
Регистрация: 22.11.2007
Сообщений: 2,664
Читатели: 19

Администратор
 
Структура дерева дискуссий
Дискуссия 255 11 +0.11 / 2 +4.13 / 36

Подниму-ка я тему структурирования дерева дискуссий на ГА.

То что здесь обсуждалось когда-то Авантюристом ранее, давно уже не работает и не актуально. На текущий момент структура дискуссий у нас отражена в ветках форума. Но отражена коряво, непонятно и зачастую с дублированием. Иногда бывает непонятно где-что публиковать. Предлагаю прояснить текущую структуру дерева дискуссий и сопоставить с названиями веток форума.

Думаю, что нужно пройтись по разделам и идентифицировать дискурс каждой ветки. Что-то можно объединить, что-то выделить отдельно. В результате вывесить где-нибудь в качестве указателя-путеводителя, чтобы всем было понятно что-где обсуждается.

Просьба заинтересованным комрадам поучаствовать.

Например, как это могло бы выглядеть:

ЭКОНОМИЧЕСКИЙ РАЗДЕЛ

...

ПОЛИТИЧЕСКИЙ РАЗДЕЛ

Геополитика (Большой передел мира)
---- Украина (Украинско-российский отношения)
---- КНДР (Напряженность на корейском полуострове)
---- ...
Россия (Перспективы развития России) - можно переименовать ветку как общую по России
---- Внутренняя политика (Выбор России: текущая политическая ситуация)
---- ...

Важно учитывать:
* Структура относится к тредам;
* Тред можно будет публиковать в нескольких ветках (дискурсах). Например, создавая тред через новую кнопку "написать", публикацию в форуме можно будет делать выбирая в указателе дискурсов (а не заголовков веток), что на мой взгляд гораздо удобнее;
* Ветка (дискурс) может быть процессом или событием;
* Структура дискурсов будет часто меняться, исходя из появления новых процессов и событий;

Прикреплю и буду дополнять.
Отредактировано: ConstB - 17 декабря 2017 20:48:10
Сию обитель ваял холоп Константин дрянно и ленно, за что и был бит плетьми...
+ 0.11 / 2
  slavae
   
   
slavae   Россия
Москва

Слушатель

Карма: +628.11
Регистрация: 21.03.2013
Сообщений: 18,156
Читатели: 4

Полный бан до 19.06.2019 20:19
 
Подниму-ка я тему структурирования дерева дискуссий на ГА.

Чё-то сложновато выходит. Не покатит, мне кажется.
Сообщение скрыто автором
Империя - это мир, и этой идеологии достаточно. Мы живём в самой лучшей стране в мире и все нам завидуют.
Одушевлённое Одевают, Неодушевлённое Надевают.
-0.08 / 2
  ConstB
   
   
ConstB   Россия
Северск
37 лет

Слушатель

Карма: +140.31
Регистрация: 22.11.2007
Сообщений: 2,664
Читатели: 19

Администратор
 
Чё-то сложновато выходит. Не покатит, мне кажется.

Что сложного? Описать дискурс для каждой ветки в одно-двух-трех словах о чем она. И выстроить дерево. Что-то можно взять из дерева Авантюриста, что еще актуально.
Сию обитель ваял холоп Константин дрянно и ленно, за что и был бит плетьми...
+ 0.62 / 3
  slavae
   
   
slavae   Россия
Москва

Слушатель

Карма: +628.11
Регистрация: 21.03.2013
Сообщений: 18,156
Читатели: 4

Полный бан до 19.06.2019 20:19
 
Что сложного? Описать дискурс для каждой ветки в одно-двух-трех словах о чем она. И выстроить дерево. Что-то можно взять из дерева Авантюриста, что еще актуально.

А, вот тут уже по-человечески написано )
Сообщение скрыто автором
Империя - это мир, и этой идеологии достаточно. Мы живём в самой лучшей стране в мире и все нам завидуют.
Одушевлённое Одевают, Неодушевлённое Надевают.
+ 0.00 / 0
   
ахмадинежад   СССР

Слушатель

Карма: +2,118.19
Регистрация: 07.05.2009
Сообщений: 16,677
Читатели: 54
 
Подниму-ка я тему структурирования дерева дискуссий на ГА.
...
Просьба заинтересованным комрадам поучаствовать.

Например, как это могло бы выглядеть:

ЭКОНОМИЧЕСКИЙ РАЗДЕЛ

...

ПОЛИТИЧЕСКИЙ РАЗДЕЛ

...

Прикреплю и буду дополнять.

ещё нужен социологический раздел, до кучи к историческому
левохристианский православный исламист
Китайская мудрость: "НИ ССЫ!!!" означает "Будь безмятежен, словно цветок лотоса у подножия храма истины"
"... только дураки учатся на своих ошибках..." Отто фон Бисмарк
+ 0.84 / 6
  ConstB
   
   
ConstB   Россия
Северск
37 лет

Слушатель

Карма: +140.31
Регистрация: 22.11.2007
Сообщений: 2,664
Читатели: 19

Администратор
 
ещё нужен социологический раздел, до кучи к историческому

Я, в отличии от идеи Авантюриста, хочу выстроить дерево исходя из наработанного на практике, т.е. из тех веток что сейчас есть, а не создавать структуру впереди дискуссий. Если есть ветки на социологическую тему, то можно объединить в раздел.

Кстати, ахмади, хороший момент для объединения веток!
Сию обитель ваял холоп Константин дрянно и ленно, за что и был бит плетьми...
+ 0.38 / 2
   
ахмадинежад   СССР

Слушатель

Карма: +2,118.19
Регистрация: 07.05.2009
Сообщений: 16,677
Читатели: 54
 
Я, в отличии от идеи Авантюриста, хочу выстроить дерево исходя из наработанного на практике, т.е. из тех веток что сейчас есть, а не создавать структуру впереди дискуссий. Если есть ветки на социологическую тему, то можно объединить в раздел.

так в том -то и дело, что их валом и распиханы во существующим
ещё к примеру наверно надо сделать завалинку/хобби/интересы ...
Кстати, ахмади, хороший момент для объединения веток!

Улыбающийся
левохристианский православный исламист
Китайская мудрость: "НИ ССЫ!!!" означает "Будь безмятежен, словно цветок лотоса у подножия храма истины"
"... только дураки учатся на своих ошибках..." Отто фон Бисмарк
+ 1.02 / 9
  normalized_
   
   
normalized_   Россия
Москва

Слушатель

Карма: +58.01
Регистрация: 07.06.2016
Сообщений: 4,199
Читатели: 11
 
Я, в отличии от идеи Авантюриста, хочу выстроить дерево исходя из наработанного на практике, т.е. из тех веток что сейчас есть, а не создавать структуру впереди дискуссий. Если есть ветки на социологическую тему, то можно объединить в раздел.

Кстати, ахмади, хороший момент для объединения веток!

Что-то все равно без выстроенного вручную дерева у меня не получается.

В качестве примера, (чтоб понять что нужно сделать, а то не понятно все равно) попробовал расставить тэги по некоторым веткам для "Политического раздела" (которые обновлялись в этом разделе за последние 2 года):
  • Есть список веток в виде файла csv, который открывается обычным редактором таблиц. Для некоторых веток политического раздела добавлены тэги (в крайние правые столбцы tag1 tag2 tag3) : topics_all.csv. То есть человек с ним работает и расставляет тэги.
  • Для того чтобы оценить что получается, как раскидываются ветки генерируется вьюшка, вот как раз для этого понадобилось дерево tree.md (составлено человеком), в котором тэги расставлены иерархически ручками. (возможна сериализация и десериализация в  csv)
  • С помощью двух этих исходных файлов после проверки соответствия тэгов сгенерирован (check.ipynb) пример view-шки, что получается: topics_generated.md


Вопросы и неясности:
  • Что дальше? Что должно получиться в итоге? Правильное ли направление движения?
  • 'дерево тэгов' (в моем понимании) == 'указатель дискурсов' или есть нюансы?
  • Как я понял из выше написанных сообщений: так как к ветке могут быть привязаны несколько тэгов, то ветка может одновременно попасть в несколько каталогов (Например Донбасс - его жизнь и судьба попадает и к России и к Украине).
  • Как я понял из выше написанных сообщений: К каталогу, например "Россия", может быть привязана ветка (например ПРР), но только одна. (добавить столбец в csv файл? или как?)
  • Пока что в рамках раздела, в дереве, тэги уникальны. То есть тэг США в "Политическом разделе" может быть в дереве только не более одного раза (а ведь можно придумать случаи, когда потребуется чтоб какой-то тэг в дереве встречался более одного раза)


А вот чтобы строить иерархию автоматически исходя из наработанного без дерева, то есть только на основе main_topics.csv ( + названия, тэгов, и, например, на основе текста первых двадцати сообщений и других данных), то нужно что-то типа тематического моделирования (рекомендую просмотреть лекцию) которое поддерживает динамику, или что-то еще. Но это пока сложно.

Теперь насчет workflow.
Если хотя бы на 50% направление верно (но после обсуждения), то можно брать/скачивать .csv файлы и пробовать дальше расставлять теги, можно форкиться или пулриквестивать. Расставить тэги ко всем веткам я, конечно, не смогу (о ветках и представления-то не имею, кто и что там чего обсуждал или обсуждает), Особенно много топиков на "Пользовательских разделах" (половина веток, 800 из 1600) понятно что все ветки пока не нужно и некоторые старые, но все таки желательно охватить (так как потом возможно будет обучение, чтоб автоматически классифицировать документ). Начать, кмк, для примера лучше с двух-трех разделов (чтоб учесть проблему общих тем между разделами).

Для оценки времени: всего веток на форуме 1596, включая заблокированные, если на каждую (а каждую не нужно) тратить 5-10 секунд, то тэгирование займет  2-4 часа. Соответственно создается файл дерева tree.md (одновременно, а может быть и раньше, а может быть и позже).

И все равно, до конца не понимаю результат и зачем все это нужно. Самое непонятное куда отнести ветку "Путин" которая на пользовательских, как протэгировать понятно.
+ 0.24 / 3
   
ахмадинежад   СССР

Слушатель

Карма: +2,118.19
Регистрация: 07.05.2009
Сообщений: 16,677
Читатели: 54
 
Что-то все равно без выстроенного вручную дерева у меня не получается.
Скрытый текст

И все равно, до конца не понимаю результат и зачем все это нужно. Самое непонятное куда отнести ветку "Путин" которая на пользовательских, как протэгировать понятно.

для Путина создать раздел - "культ личности"
и туда про Путина, Сталина, Ленина, Грозного, Всеволода Большое гнездо ... Веселый
Отредактировано: ахмадинежад - 20 декабря 2017 14:15:28
левохристианский православный исламист
Китайская мудрость: "НИ ССЫ!!!" означает "Будь безмятежен, словно цветок лотоса у подножия храма истины"
"... только дураки учатся на своих ошибках..." Отто фон Бисмарк
+ 0.82 / 7
  normalized_
   
   
normalized_   Россия
Москва

Слушатель

Карма: +58.01
Регистрация: 07.06.2016
Сообщений: 4,199
Читатели: 11
 
для Путина создать раздел - "культ личности"
и туда про Путина, Сталина, Ленина, Грозного, Всеволода Большое гнездо ... Веселый

Пока просто "Личности" ( для примера), но он еще в пользовательских (как "пользователь" Веселый, то есть в корне дерева)
Для оперативной вьюшки - дерево на яваскрипте c раскрытием по тэгу, например: Путин, Сталин
США в трех местах, Украина тоже военно-политическая-пользовательская.
В csv набил тэги пока для трех разделов (очень грубо, для примера, ориентируясь только по названию веток, не все ветки).
Отредактировано: normalized_ - 20 декабря 2017 21:57:18
+ 0.18 / 2
  Маликар
 
04 января 2018, 16:47:51 Сообщение удалено автором
 
+ 0.00 / 0
 
  slavae
 
04 января 2018, 18:26:19 Сообщение удалено автором
 
+ 0.00 / 0
 
←Пред←1 63  64 
 
НОВОСТИ ПАРТНЕРОВ

AFTERSHOCK

     
Сейчас на ветке:
Всего: 0, Гостей: 0, Пользователей: 0, Мобильных: 0
  1. >
  2. Форум >
  3. Технический раздел >
  4. Структура дерева знаний
Глобальная Авантюра © 2007-2019 Глобальная Авантюра. Все права защищены и охраняются законом. При использовании любого материала любого автора с данного сайта в печатных или Интернет изданиях, ссылка на оригинал обязательна. Мнение администрации не обязательно совпадает с мнением авторов документов и комментариев, опубликованных на сайте.

CCBot/2.0 (https://commoncrawl.org/faq/)
Unknown

Яндекс.Метрика