search

RoboRate / TuningTitans

MIT License
0 stars 6 forks source link

feat:新增models.py跟dataset更新requirements #10

Closed kennyHuang1110 closed 1 year ago

kennyHuang1110 commented 1 year ago

新增一個轉檔程式可以讀取資料夾內所有的TXT檔，並轉成fine tuning的資料格式，附上資料來源與轉換完成之格式，以及更新requirements

issues:4#issue-1832269933

kennyHuang1110 commented 1 year ago

目前輸出是這樣 {"prompt": "文本塊1", "completion": "文本塊2"} {"prompt": "文本塊2", "completion": "文本塊3"} 請問老師需要以下格式嗎? {"prompt": "文本塊1", "completion": "文本塊2"} {"prompt": "文本塊3", "completion": "文本塊4"}

yillkid commented 1 year ago

目前輸出是這樣 {"prompt": "文本塊1", "completion": "文本塊2"} {"prompt": "文本塊2", "completion": "文本塊3"} 請問老師需要以下格式嗎? {"prompt": "文本塊1", "completion": "文本塊2"} {"prompt": "文本塊3", "completion": "文本塊4"}

prompt 跟 completion 如果是你原始的方式的話。 想必文本塊需要有很大的關聯性吧？ 這題應該是因人而異的。