Open Peter-Hamster opened 1 year ago
我在使用自己的数据集转化成jsonl之后运行tokenize_dataset_rows会显示这个错误 ValueError: Input None is not valid. Should be a string, a list/tuple of strings or a list/tuple of integers.
训练集的Json格式内容大概是这样的
这个该怎么解决呢?
我在使用自己的数据集转化成jsonl之后运行tokenize_dataset_rows会显示这个错误 ValueError: Input None is not valid. Should be a string, a list/tuple of strings or a list/tuple of integers.
训练集的Json格式内容大概是这样的![image](https://github.com/mymusise/ChatGLM-Tuning/assets/68176073/d201d067-063f-4576-931f-c78074ca8db6)
这个该怎么解决呢?