Closed xuanzebi closed 4 years ago
如上图,怎么确定每个字符的word数量, 比如南京市长江大桥,对于桥这个字符,有长江大桥,大桥这两个word,对于字符‘市’,只有 南京市一个word, 如何确定每一个batch中的word数量Si^p。
然后就是想问这个数量是规定好的吗还是怎么得出来的
您好,这是在数据处理阶段实现已经整理好了,相当于数据预处理部分
如上图,怎么确定每个字符的word数量, 比如南京市长江大桥,对于桥这个字符,有长江大桥,大桥这两个word,对于字符‘市’,只有 南京市一个word, 如何确定每一个batch中的word数量Si^p。
然后就是想问这个数量是规定好的吗还是怎么得出来的