BrambleXu / knowledge-graph-learning

A curated list of awesome knowledge graph tutorials, projects and communities.
MIT License
735 stars 120 forks source link

IJCAI-2020-A Speech-to-Knowledge-Graph Construction System #314

Open BrambleXu opened 4 years ago

BrambleXu commented 4 years ago

Summary:

将语音转换为知识图谱,一个很有效的场景是整理会议记录。

Resource:

Paper information:

Notes:

很棒的工作,说实话我从来没有想过直接把语音转换成KG的想法。因为从text转换成KG就已经够麻烦了,再加上语音识别,啧啧。 但是这个工作的demo效果很棒,突破了预期。

用KG代替会议记录倒是一个不错的应用场景。从demo的效果看,语音部分是否完成很重要,通过在会议的时候,语言交流时上下文省略非常厉害,resolution恨不能做好起到关键的效果。

下面是KG构建时的extraction部分。每个verb phrase都当做一个predicate。

image

Model Graph:

image

image

Result:

Thoughts:

Next Reading: