search

smallporridge / Socialformer

The implement of Socialformer
MIT License
7 stars 2 forks source link

demo.json的问题 #3

Open tangjiawei777 opened 2 years ago

tangjiawei777 commented 2 years ago

模型期望的数据集的格式是demo.json格式，在这里我有两个问题想请教一下：

1 按照论文的图1所示，每次输入好像是只有一个query和document，为什么在demo.json中却是好几个query和document一起输入就像这样{"qry": [2054, 2003, 21760], "psg": [16770, 1024, 1013, 1013, 4372, 1012...]}

2 第二个就像上面展示的qry里面有的放3个，有的又放4个，这是为什么呀？

smallporridge commented 2 years ago

"qry":[2054, 2003, 21760]代表一个查询tokenize之后的序列，psg同理