CoSENT损失计算问题

[YingchaoX]

Describe the Question

Please provide a clear and concise description of what the question is.

老师您好，

想问在cosent_dataset.py的load_cosent_train_data()函数中，

if path.endswith('.jsonl'):
    data_list = load_jsonl(path)
    for entry in data_list:
        field1, field2 = get_field_names(entry)
        if not field1 or not field2:
            continue

        text_a, text_b, score = entry[field1], entry[field2], float(entry["label"])
        data.append((text_a, score))
        data.append((text_b, score))

为什么将三元组

text1, text2, label

拆分成了

text1, score
text2, score

这样的两对数据。那在计算训练损失的时候如何进行cos计算呢？

谢谢！

[shibing624]

详见loss计算模块代码，奇偶取值计算

[YingchaoX]

详见loss计算模块代码，奇偶取值计算

哦哦哦，看到了看到了！