Семантические парсеры и поисковые системы

[Alephegg]

worm2 в сообщении #1353758 писал(а):

Настоящий смысл должен выковываться в боях с настоящей окружающей действительностью.

И даже этого не достаточно. Если мы говорим о компьютерной обработке. Нужна модель смысла. Ее пока нет (в публичном пространстве).

[Rasool]

Alephegg в сообщении #1354041 писал(а):

Rasool в сообщении #1354031 писал(а):

Система должна уметь отвечать на вопросы по тексту.

Должна, но никто не умеет. Даже в самом простом варианте. Например, запрос: "столица государства где говорят по русски" будет выдавать ссылки по ключам "столица", "язык", "русский". Почему? Потому, что для текущих вариантов NLP/NLU значениями являются слова (как байтовые массивы), а не их смыслы.

Да, потому что для этого нужно знание таких вещей, как "столица", "государство", "язык населения государства". И нужно уметь сопоставлять этот запрос ("столица государства где говорят по русски") с имеющейся базой знаний.

[Alephegg]

Rasool в сообщении #1354089 писал(а):

Да, потому что для этого нужно знание таких вещей, как "столица", "государство", "язык населения государства".

А что это за вещь - знание того, что такое столица? Набор ассоциированных с этим словом других слов? В стиле дистрибутивной сематики?

[Rasool]

Alephegg в сообщении #1354122 писал(а):

Rasool в сообщении #1354089 писал(а):

Да, потому что для этого нужно знание таких вещей, как "столица", "государство", "язык населения государства".

А что это за вещь - знание того, что такое столица? Набор ассоциированных с этим словом других слов? В стиле дистрибутивной сематики?

В терминах онтологий - например, отношение типа "X есть столица государства Y". Утверждение в форме предиката, иными словами.

-- Чт ноя 15, 2018 01:31:27 --

Я задал вопрос топика в фейсбуке в группе Computational Liguistics, там по поводу Google мне ответили следующее:

Цитата:

Semantic parsers are being used in various Google services, for example they use a Frame parser to analyze queries and also in their Google assistant. Also they use a semantic parser to map natural language queries to formal expressions that can help them to find the answer in their knowledge graph.

И вообще о необходимости семантического парсинга в современных задачах:

Цитата:

IMHO the current problem with semantic parsing is that there are many different syntactic-semantic formalisms, e.g. AMR, frame semantics,HPSG, CCG, Groningen meaning bank and ... but they lack coverage and most of them don't have large scale annotated datasets. Also most of current tasks in CL/NLP are being done without explicit semantic parsers. For example for a QA task like SQUAD dataset, there are neural models with near human performance and none of them are using explicit (formal) semantic analysis of text, most of them do not even use syntactic analysis.

[Alephegg]

Rasool в сообщении #1354147 писал(а):

В терминах онтологий - например, отношение типа "X есть столица государства Y".

Беседа сделала круг и вернулась к cyc.com и Дугласу Ленату.

[Mihaylo]

Само по себе рассуждение о парсинге смысла никакой значимости для науки не имеет. Ребята, ну вот вы этот парсер сделаете, выделите смысл не в виде байтов, а виде дерева какого-то. Дальше-то что?

Вы пытаетесь придать важное значение некоторой сущности, но как её использовать и зачем не пытаетесь понять. Дело в том, что каждый текст имеет 100500 смыслов. И что с этим делать?

На самом деле выделение смысла неразрывно связано с некоторой деятельностью (выхлопом интеллектуальной функции). Я веду весь разговор к тому, что нужен парсер прагматики. Вспомните тройку "синтаксис-семантика-прагматика". Вы говорите о семантике, которая у любого текста даже длиной в один байт занимает 100500 байт в памяти. Прагматика же - это та часть семантики, которая нужна для данной конкретной деятельности. Если вы не рассматриваете деятельность, то значит вы занимаетесь ерундой.

Нейронная сеть и прочие интеллектуальные методы являются парсером прагматики. Если нейронная сеть имеет узкое направление деятельности, то прагматизм тоже узкий, полезный смысл узкий. Если нейронная сеть генерализована, то на ваше счастье прагматика стремится расшириться до уровня семантики. Но все равно голову надо беречь, иначе котелок перегреется. Не надо видеть в каждой строчке межстрочные данные, не надо пытаться обобщать задачу и искать универсальный смысл, семантику. Каждая подсеть генерализованной ИНС сама выделит тот смысл, который ей точно надо.

[Alephegg]

Для тех, кто не знает и невежд даю справку: прагматика - это не деятельность, это особенности использования языка, закрепленные в языковой культуре и повседневном быте. Пример: ложка ЛЕЖИТ на столе, чашка СТОИТ на столе, а кошка СИДИТ на столе - вот это - прагматика.

[Pphantom]

Alephegg, предупреждение за переход на личности.

-- 15.11.2018, 03:18 --

Тема закрыта как скатившаяся в бессмысленное переругивание. Судя по опыту как этой, так и предыдущих тем, Mihaylo и Alephegg настоятельно не рекомендуется общаться, ничего хорошего из этого все равно не выходит.