01-ai / Yi-1.5

Yi-1.5 is an upgraded version of Yi, delivering stronger performance in coding, math, reasoning, and instruction-following capability.
Apache License 2.0
355 stars 20 forks source link

除了34B,其他小参数模型的指令跟随能力都不行 #14

Open wwjCMP opened 1 month ago

wwjCMP commented 1 month ago

希望后续版本能对小参数的模型加强这方面的能力

Yimi81 commented 1 month ago

可以反馈一些bad case吗?

shixiaoyangaaa commented 1 month ago

尴尬是,34b的也不行。感觉比旧版差

shixiaoyangaaa commented 1 month ago

中文的对话指令,出现的结果是:翻译对话内容+重复回复下一句,中英文夹杂

shixiaoyangaaa commented 1 month ago

重复回复的下一句有:英文版,简化中文版,繁体中文版,简直无敌了

shixiaoyangaaa commented 1 month ago

另外,要求输出json格式,也会有概率出现一大串Python代码

Yimi81 commented 1 month ago

@shixiaoyangaaa 可以提供一些截图吗?我好反馈给同事

shixiaoyangaaa commented 1 month ago

😅😅😅 不太方便,你们应该能测出来,不是偶发的

---- 回复的原邮件 ---- | 发件人 | Guofeng @.> | | 日期 | 2024年05月16日 14:26 | | 收件人 | @.> | | 抄送至 | @.>@.> | | 主题 | Re: [01-ai/Yi-1.5] 除了34B,其他小参数模型的指令跟随能力都不行 (Issue #14) |

@shixiaoyangaaa 可以提供一些截图吗?我好反馈给同事

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you were mentioned.Message ID: @.***>