当前位置: 首页 > news >正文

什么是数据标注?

1. 什么是数据标注

这个是IT互联网公司的一个职位,数据标注员就是使用自动化的工具从互联网上抓取、收集数据包括文本、图片、语音等等,然后对抓取的数据进行整理与标注。相当于互联网上的”专职编辑“。 这个岗位工作任务简单的,没什么技术含量。工资基本也不高,大部分3000-4000,很少有5000以上的。而且这类IT公司大部分都是民营公司,待遇不会太高。

训练集和测试集都是标注过的数据。

在进行数据标注之前,我们首先要对数据进行清洗,得到符合我们要求的数据。数据的清洗包括去除无效的数据、整理成规整的格式等等。具体的数据要求可以和算法人员确认。

2. 举例说明

我们在聊天软件中,通常会有一个语音转文本的功能,这种功能的实现大多数人可能都会知道是由智能算法实现的,但是很少有人会想,算法为什么能够识别这些语音呢,算法是如何变得如此智能的?

其实智能算法就像人的大脑一样,它需要进行学习,通过学习后它才能够对特定数据进行处理,反馈。

正如语音的识别,模型算法最初是无法直接识别语音内容的,而是经过人工对语音内容进行文本转录,将算法无法理解的语音内容转化成容易识别的文本内容,然后算法模型通过被转录后的文本内容进行识别并与相应的音频进行逻辑关联。

也许会有人问,那么不同的语速、音色模型算法怎么能够分辨呢。这就是为什么模型算法在学习时需要海量数据的原因,这些数据必须覆盖常用语言场景、语速、音色等,全面的数据才能训练出出色的模型算法。语音标注的过程如下图示,便于理解。

3. 常见的数据标注类型

1. 分类标注: 分类标注,就是我们常见的打标签。一般是从既定的标签中选择数据对应的标签,是封闭集合。如下图,一张图就可以有很多分类 / 标签:成人、女、黄种人、长发等。对于文字,可以标注主语、谓语、宾语,名词动词等。
适用:文本、图像、语音、视频
应用:脸龄识别,情绪识别,性别识别

2. 标框标注: 机器视觉中的标框标注,很容易理解,就是框选要检测的对象。如人脸识别,首先要先把人脸的位置确定下来。
适用:图像
应用:人脸识别,物品识别

3. 区域标注: 相比于标框标注,区域标注要求更加精确。边缘可以是柔性的。如自动驾驶中的道路识别。
应用:自动驾驶

4. 描点标注: 一些对于特征要求细致的应用中常常需要描点标注。人脸识别、骨骼识别等。
应用:人脸识别、骨骼识别

5. 其他标注: 标注的类型除了上面几种常见,还有很多个性化的。根据不同的需求则需要不同的标注。如自动摘要,就需要标注文章的主要观点,这时候的标注严格上就不属于上面的任何一种了。(或则你把它归为分类也是可以的,只是标注主要观点就没有这么客观的标准,如果是标注苹果估计大多数人标注的结果都差不多。)

4. 参考

“谈谈人工只能标注那些事儿”http://app.myzaker.com/news/article.php?pk=5a1d1fea1bc8e08903000015

http://www.xdnf.cn/news/842347.html

相关文章:

  • 香港高防服务器秒解是什么意思?
  • android人脸识别——HowOld测测你的年龄和性别
  • 展商名单、论坛全攻略!2024深圳增材制造展规模空前、活动超丰富!
  • 【图像处理】自动报靶系统(重弹孔)【含 GUI Matlab源码 973期】
  • ios手游游戏辅助挂机工具_关于扰乱正常游戏秩序类第三方辅助工具(外挂/脚本)的打击公告...
  • 乐味煲耳机软件中文版解读
  • adsfasdfasdf asdfawd
  • 最新Connectify注册码(序列号) Connectify3.7序列号 破解版
  • 永久免费不流氓,12年的国产良心软件正式开源!
  • Retrofit、RxHttp、OkOne
  • 念のため日文翻译成中文
  • 红客是什么?红客需要传承!
  • 实用的android颜色配置表(亮瞎尼的双眼)
  • 颜色对照表
  • shutdown immediate 持久无法关闭数据库之解决方案
  • 最全地理数据下载网址
  • shell IFS
  • LTDC/DMA2D—液晶显示***
  • Java核心技术2
  • 费马定理中值定理_达布中值定理
  • Prime95怎么使用?Prime95烤机教程
  • 起点导航系统源码最新V2.6开源可运营版
  • Perhaps, perhaps, perhaps 英国电视剧冤家对对碰主题曲
  • 企业终端安全管理软件有哪些?终端安全管理软件哪个好?
  • 编码器类型原理知识汇总(增量式/绝对式/绝对值)
  • Material Design之CollapsingToolbarLayout 相关属性和方法介绍
  • 【测试面试题】14题常见APP测试面试题(参考答案)
  • Rational Rose 2007 下载,安装及破解激活图文教程
  • USB复合设备(mass storagehid)
  • 51单片机程序烧录教程