美文网首页
mvso数据集

mvso数据集

作者: 约翰纳斯 | 来源:发表于2018-11-03 18:08 被阅读0次

共有包含12种语言在内的730万张图片与相应的元数据

其中人工标注数量:11734

其大小分布为

Screenshot from 2018-11-09 22-33-01.png

数据标注方法:

三个人分别根据给出图片与对应描述打分,分数有六种,-2,-1,代表消极情感倾向,0代表不包含情感倾向,1,2代表积极情感倾向,没有打分代表图文传达出相矛盾的情感

三人打分一致的数据共有2329个图文对

其中



标签 对应数目
0:1225
1:1005
-1:62
2:30
-2:7
null :0

至少两人达成一致的共有9793个图文对

其中



标签 对应数目
0:4524
1:4475
-1:403
2:360
-2:30
null:1

网络结构renet34


混淆矩阵.png

初步使用数据

我们将数据集进行处理,将标签从6个减少为3个,即将-2,-1看为-1,将1,2看为1,并去掉图文表达冲突的数据,然后将最少两人达成一致的数据提取出来作为初步数据集,其分布如下


数据分布

其中消极数据502个,中立数据4423,积极数据5744,数据量由11734减少为10669。
我们可以发现人们更倾向在社交网络上表达积极的情感。

文本数据

每个文本平均包含41.97个单词。
长度超过100的有1034个,没有描述的有169个,为了降低学习的难度我们将其从训练集中去掉,其余的长度分布如下

图像描述长度分布

认为不准确的图文对:

捕获1.PNG 屏幕截图(10).png 屏幕截图(18).png 屏幕截图(19).png 屏幕截图(20).png 屏幕截图(21).png 屏幕截图(22).png 屏幕截图(24).png 屏幕截图(25).png

相关文章

  • mvso数据集

    共有包含12种语言在内的730万张图片与相应的元数据 其中人工标注数量:11734 其大小分布为 数据标注方法: ...

  • SAS中的数据清洗

    1.数据合并 (1)利用set语句纵向合并 data数据集; set数据集1(数据集选项)数据集2(数据集选项...

  • sklearn数据集的获取与划分

    划分数据集 获取sklearn本地的数据集 描述iris数据集 从网络获取数据集 网络获取 划分训练集和测试集 数...

  • Fastone-集群数据集管理+导入导出+aksk

    1集群数据集管理 1.1新增数据集 1.2绑定数据集 1.3查看指定数据集 1.4查看当前用户下的所有数据集 1....

  • 机器学习算法实现(十):Apriori

    Apriori算法R语言实践 数据集 采用arules包中的Adult数据集。 Adult数据集属于事务型数据集。...

  • 基于Keras实现Kaggle2013--Dogs vs. Ca

    【下载数据集】 下载链接--百度网盘关于猫的部分数据集示例 【整理数据集】 将训练数据集分割成训练集、验证集、测试...

  • 关于SDTM编程的一些想法(10)--CM

    前面Events数据集介绍完毕,现在开始介绍Interventions数据集。Interventions数据集主要...

  • 87. 数据集与预训练模型下载小记

    检测/识别数据集:行人检测数据集 密码:01xa人脸识别数据集 密码:xkkaCOCO等开源数据集国内下载人脸数据...

  • sklearn学习 — 数据集

    sklearn数据集 1. 数据集的划分 训练集 : (占数据集比重高) 用于训练,构建模型 测试集 : 在模型...

  • R的数据集

    [TOC] 1.显示R中的数据集 RStudio显示如下 caret的数据集 2.显示数据集详细 ?数据集名字,会...

网友评论

      本文标题:mvso数据集

      本文链接:https://www.haomeiwen.com/subject/awmkxqtx.html