replace </s> <unk> in generation task

salesforce / CodeT5

Home of CodeT5: Open Code LLMs for Code Understanding and Generation

https://arxiv.org/abs/2305.07922

BSD 3-Clause "New" or "Revised" License

2.74k stars 401 forks source link

replace </s> <unk> in generation task #93

Open watreyoung opened 1 year ago

watreyoung commented 1 year ago

Hi! When I reproduced your result about code generation task, i found the code in line 32 of _utils.py. I don't know why do you replace to . Looking forward to your reply!