search

MultimodalAffectiveComputing / FV2ES

A Fully End2End Multimodal System for Fast Yet Effective Video Emotion Recognition
30 stars 3 forks source link

数据集格式询问 #12

Open ICMiF opened 3 months ago

ICMiF commented 3 months ago

尊敬的研究者： 您好！我想用这个模型在自己的数据集上进行分类，请问可以给出数据集的简单示例吗～ 非常感觉您提供了数据集，但这个数据集过大，需经过漫长的时间才能下载到机器上，

ICMiF commented 3 months ago

或者是否有处理数据集的代码呢？ 我能够下载其中一个比较小的原始数据集，但我仍然不清楚要运行该代码所需的数据集格式是怎样的

MultimodalAffectiveComputing commented 3 months ago

尊敬的研究者： 您好！我想用这个模型在自己的数据集上进行分类，请问可以给出数据集的简单示例吗～ 非常感觉您提供了数据集，但这个数据集过大，需经过漫长的时间才能下载到机器上，

首先非常感谢您对本研究的兴趣。针对您提出的三个问题，我们做出如下解答： 1、 数据集的简单示例。针对您的这个问题，我们上传了一个IEMOCAP数据集中的一个视频案例，详见代码库。 2、 处理数据集的代码。关于视频文件的自动处理代码，您可以在代码库datasets.py文件中找到答案，文件路径为FV2ES/V2EM_prediction/src/datasets.py。 3、 数据集的格式。关于数据集的格式，如果您需要运行V2EM那么您需要使用README.md中提到的dataset，其详细内容如下： ./data

ICMiF commented 3 months ago

尊敬的研究者： 您好！我想用这个模型在自己的数据集上进行分类，请问可以给出数据集的简单示例吗～ 非常感觉您提供了数据集，但这个数据集过大，需经过漫长的时间才能下载到机器上，

首先非常感谢您对本研究的兴趣。针对您提出的三个问题，我们做出如下解答： 1、 数据集的简单示例。针对您的这个问题，我们上传了一个IEMOCAP数据集中的一个视频案例，详见代码库。 2、 处理数据集的代码。关于视频文件的自动处理代码，您可以在代码库datasets.py文件中找到答案，文件路径为FV2ES/V2EM_prediction/src/datasets.py。 3、 数据集的格式。关于数据集的格式，如果您需要运行V2EM那么您需要使用README.md中提到的dataset，其详细内容如下： ./data

  • IEMOCAP_HCF_FEATURES：预处理完成整合好的视频数据
  • IEMOCAP_RAW_PROCESSED：切分好的短视频
  • IEMOCAP_SPLIT：测试集，训练集及验证集划分
  • MOSEI_RAW_PROCESSED：预处理完成整合好的视频数据
  • MOSEI_HCF_FEATURES：切分好的短视频
  • MOSEI_SPLIT ：测试集，训练集及验证集划分 而如果您需要运行FV2ES，作为系统，您需要的数据为原始的长视频，如IEMOCAP数据集或者CMU-MOSEI数据集中的原始视频，而非上述的预处理后数据集。这点我们也将在README.md中重新提醒。而这两个数据集的内容均由视频，音频、文本以及标签文件组成。 感谢您的提问。

非常感谢！！！！