search

tangqiaoyu / ToolAlpaca

ToolAlpaca: Generalized Tool Learning for Language Models with 3000 Simulated Cases
Apache License 2.0
281 stars 34 forks source link

数据问题："intermediate_steps": [] 都是空的 #22

Open luckierya opened 2 months ago

luckierya commented 2 months ago

您好，为啥造的数据用gpt4 也是没有中间的结果，全是空的

image
tangqiaoyu commented 2 months ago

看你的图片中，output那里有解析错误，你可以具体看一下那里的提示。

luckierya commented 2 months ago

对，是的，这个网页好像不能下载了

在 2024-07-04 15:42:04，"Tang Qiaoyu" @.***> 写道：

看你的图片中，output那里有解析错误，你可以具体看一下那里的提示。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you modified the open/close state.Message ID: @.***>

luckierya commented 2 months ago

您好。我用了您新发上去的public_apis.json重新跑了下，发现intermediate_steps 不是空了，但是没有返回结果。 image image 还有就是我把train data 用build_dataset.py转化后直接用了fastchat 训练了vicuna_7B, 感觉完全不能用了。不知道怎么测试模型效果的。模型问个你好，给了特别长的回复。是不是数据不能直接用这个格式训练呀？需要转化成 tools conversation的格式才可以呀？

luckierya commented 2 months ago

image

tangqiaoyu commented 2 months ago

从这些图片中可以看出，你没有打开工具模拟器或者是它出错了。

python instance_generation/simulator.py -api ./data/api_data.json