prompt行尾含有空格会发生什么？为什么不能有空格

hkust-nlp / ceval

Official github repo for C-Eval, a Chinese evaluation suite for foundation models [NeurIPS 2023]

https://cevalbenchmark.com/

MIT License

1.6k stars 74 forks source link

prompt行尾含有空格会发生什么？为什么不能有空格 #51

Closed cangyi071 closed 10 months ago

cangyi071 commented 1 year ago

在https://github.com/SJTU-LIT/ceval/blob/main/resources/tutorial.md 中提到 “prompt 的格式非常重要！！注意要换行！！注意每行末尾不要有空格”，想请教一下 prompt的结尾如果有空格，会引发什么问题？大模型的鲁棒性是否还没办法处理这个空格

jxhe commented 10 months ago

一般经验认为我们推荐的格式更合适和常见，但实际上prompt结尾如果有空格可能也不会有太大问题，我们并没有实验的证据，这个也跟不同大模型的robustness有关