FYI：最近测了 bce chunksize & bge 对比

[tpoisonooo]

数据是集中深度学习领域的，不一定对，见 https://zhuanlan.zhihu.com/p/704311157

[tpoisonooo]

三、BCE 还是 BGE ？ 前面验证右值时，已给出豆哥在 BCE 和 BGE[5]上的精度结果（75.39 vs 72.23）。本文并未观察到二者在结构上有显著差异，考虑到 BGE 模型更大，因此推测 BCE 的训练数据和豆哥更匹配。

由于 BGE 提供了完整的复现过程、论文和源码，对于注重数据隐私的业务，BGE 更适合微调和难例挖掘。

[shenlei1020]

Thanks for your experiences!