Closed TianruiZhang closed 3 years ago
在进行长句(超过512)分词的过程中,如何将auto_truncate设为True?求大佬解答。
现在fastHan内部没法进行截断,只能由用户在输入之前自己截断;下个版本的fastHan会添加自动截断的功能
感谢!
在进行长句(超过512)分词的过程中,如何将auto_truncate设为True?求大佬解答。