search

taishan1994 / OneRel_chinese

OneRel在中文关系抽取中的使用
113 stars 9 forks source link

token后面都添加一个空格 #2

Closed TheHonestBob closed 2 years ago

TheHonestBob commented 2 years ago

请问一下，在HBTokenizer处理时，每个字符后面加[unused1]的作用是什么呢，没有看明白