梦殇国际

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
热搜: 刷粉
月光下载 云刷粉软件 云刷粉网页 水贴机电脑版 安卓软件 梦殇导航(教程集合) 有任何问题请点击提问
查看: 3599|回复: 28
打印 上一主题 下一主题

[聊天] 给你们看看腾讯的鉴黄系统 - 万象优图智能鉴黄

[复制链接]

4万

帖子

8567

积分

2771

TBS

UID
4
积分
8567
TBS
2771
智商
23004
节操
22085
海贝
1676
阅读权限
200
在线时间
3112 小时
注册时间
2014-1-1
最后登录
2024-11-5

在线时间长爱心大使梦殇元老

QQ
跳转到指定楼层
1
发表于 2016-3-23 10:02:28 | 只看该作者 回帖奖励 |正序浏览 |阅读模式
网址:http://www.qcloud.com/event/pd

所以你们发的图片腾讯其实是知道的,只是想不想管的问题而已
哈哈

下面介绍一下实现的原理
======================================
作为一名资深鉴黄老司机,有必要为大家科普一下:

首先,腾讯的「万象鉴黄智能识别」是一种基于深度学习的图片识别技术。

那么问题来了,什么是深度学习?牛掰在哪里?

深度学习简单来讲就是:模仿人脑的机制来解释数据,让机器自动学习良好的特征,从而免去人工选取的过程。

原理部分(不感兴趣可直接略过):

==================以下字我都认识但就是看不懂的分割线===================

什么是深度学习?深度学习概念由人工神经网络(Artificial Neural Network,以下简称ANN)发展而来。ANN是一种机器学习算法,最开始的机器学习是用于人工神经网络的反向传播算法(也叫Back Propagation算法或者BP算法),是只含有一层隐层节点的浅层模型。浅层学习就已经有了很多应用领域,如网页搜索排序、垃圾邮件过滤系统、基于内容的推荐系统等。

相对于浅层学习,深度学习是通过构建具有很多隐层的机器学习模型和海量的训练数据,来学习更有用的特征,从而最终提升分类或预测的准确性。深度学习模型具有优异的特征学习能力,它模仿人脑的机制来解释数据,学习得到的特征对数据有更本质的刻画,从而有利于可视化或分类。

让机器理解这个世界,我们得先来看看人类的大脑是如何工作的。

人脑的视觉处理系统 (图片来源:Simon Thorpe)

上图表示,人理解外界视觉信息的过程。从视网膜(Retina)出发,经过低级的V1区提取边缘特征,到V2区的基本形状或目标的局部,再到高层的整个目标(如判定为一张人脸),以及到更高层的PFC(前额叶皮层)进行分类判断等。也就是说高层的特征是低层特征的组合,从低层到高层的特征表达越来越抽象和概念化,也即越来越能表现语义或者意图。

深度学习,恰恰就是通过组合低层特征形成更加抽象的高层特征(或属性类别)。然后在这些低层次表达的基础上,通过线性或者非线性组合,来获得一个高层次的表达。不仅图像存在这个规律,声音也是类似的。

现在来看深度学习的简易模型。

传统的神经网络与深度神经网络

深度学习的一个主要优势在于可以利用海量训练数据(即大数据),在学习的过程中不断提高识别精度,但是仍然对计算量有很高的要求。而近年来,得益于计算机速度的提升、大规模集群技术的兴起、GPU的应用以及众多优化算法的出现,耗时数月的训练过程可缩短为数天甚至数小时,深度学习才逐渐可以用于工业化。

(以上资料参考Deep Learning(深度学习)学习笔记整理系列之(一)

==================以上字我都认识但就是看不懂的分割线===================


下面为了便于非专业人士理解,我会尽量用通俗易懂的语言来回答:

以智能鉴黄为例,把用来鉴黄的机器想象成一个刚出生的宝宝。

首先人们会给机器宝宝一些标记过的图片,告诉宝宝这些是色情的,这些是性感的,还有这些是正常的。机器宝宝很聪明,会根据提供的数据学习到不同类型图片的基本特征,自己总结出一套规律,这样当你再给宝宝新的图片时,宝宝就会根据这些特征来判定图片的类型。

当然机器宝宝也会有出错的时候,因为人类对于色情的定义实在太广泛了。露点的、性暗示的、艺术的......在不同的场景下,面对不同的人群,对于色情的鉴定标准也会不同。想让机器宝宝像人一样准确,甚至比人还准,就需要利用海量的数据去不断地训练它,让机器不断纠正错误,学习到更多的特征。

不过我们也不清楚机器宝宝学到的特征是什么鬼,每一层都有不同的特征,有些特征是肤色的数据,有些是某些部位轮廓的数据,这么多层组合起来就形成了一种很抽象的特征表现。
一个很著名的例子(密恐慎入!)Google 图像识别 AI 眼中的世界是怎样的?

明白了吧?并不是有些人说的单纯基于肤色占比,否则一张手掌的近照或者光头也会被定为色情了。o(╯□╰)o

另外,很多人都在吐槽腾讯的鉴黄系统不准确,我觉得主要还是对于样本的训练问题。至于要用多少样本去训练才能达到一定的准确度的问题,可参考这个:
人工智能“毁灭”了鉴黄师?未来也许将毁灭人类

可以给大家看一下图普科技的图像识别系统(国内第一个将CV运用在鉴黄上图像识别云平台),为深度学习正名。
测试地址:图普科技—专注于图像识别和视觉检测的人工智能企业

=========================================================
评论中有人问道:“一个活人脱光腚,学雕像一模一样的姿势站着,让这个系统识别,他怎么能判断出黄不黄?”

这让我想起在人工智能领域流传的一句话: 人工智能把人的事情给做了,但是只做50%。

其实人们对于人工智能准确性的诟病一直都存在。色情与艺术的鉴定标准是人定的,理论上讲可以通过刻意训练、调整阈值等手段让机器更符合自己的标准,但不同的用户对于色情的宽容度是不一样的,在不同的时间与地域,人们对于色情与艺术的理解也是不一样的。所以不能强迫机器一定要百分百判断准确。实际上, 发展人工智能的意义,就是为了进一步连接资源,解脱人力。无论是无人驾驶汽车也好,还是用于鉴黄也好,都是这个目的。

回到这个疑问上,极端情况一定会有,这时更应该考虑的是两点:1、如何保证让机器在最大程度上代替人工。2、机器的准确率与召回率是否达到要求(一般以人眼为标准)。

目前在这一块做得最成熟的是图普科技。图普在做这个事情中首创了一种模式,将问题分割为“确定”和“疑似”的两部分,确定部分 表示机器确定没问题,由于机器确认的精确度超过99.5%,比人眼(98%~99%)还精确,可以完全替代人力了。对于机器无法确定的图片(类似问题中这种),机器会标出“疑似”,并根据概率的高低进行排序。这个时候就需要人工去复审,根据自己的标准再一次判断。一般疑似部分 约占总图片量的5%~15%(对于大多数运营正常的网站,大概仅有1%),这部分还会随着训练次数的增加而不断减少。这样就大大降低了审核工作量。一万张图,可能只需要看一两百张就够了,扫一眼就完事。




[发帖际遇]: 阿星遇到水水教训小学生上前阻止,结果被水水敲诈1 TBS 幸运榜 / 衰神榜
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复

使用道具 举报

2028

帖子

491

积分

688

TBS

UID
112173
积分
491
TBS
688
智商
931
节操
772
海贝
19
阅读权限
30
在线时间
82 小时
注册时间
2016-3-21
最后登录
2017-8-21
29
发表于 2016-3-25 13:50:16 | 只看该作者
完全不懂
[发帖际遇]: TXN童小柠看到字母和麻瓜幽会,被套套误伤,花费2 TBS买活命丹 幸运榜 / 衰神榜
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复

使用道具 举报

头像被屏蔽

44

帖子

240

积分

-1

TBS
UID
104394
积分
240
TBS
-1
智商
142
节操
141
海贝
19
阅读权限
0
在线时间
13 小时
注册时间
2016-1-28
最后登录
2017-7-30
28
发表于 2016-3-25 12:46:52 | 只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
[发帖际遇]: 爆吧神器1没钱买马甲,回家的路上遇到小雨,小雨给了他2 TBS. 幸运榜 / 衰神榜
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复 支持 反对

使用道具 举报

4万

帖子

8567

积分

2771

TBS

UID
4
积分
8567
TBS
2771
智商
23004
节操
22085
海贝
1676
阅读权限
200
在线时间
3112 小时
注册时间
2014-1-1
最后登录
2024-11-5

在线时间长爱心大使梦殇元老

QQ
27
 楼主| 发表于 2016-3-24 11:38:53 | 只看该作者
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复 支持 反对

使用道具 举报

1416

帖子

272

积分

11

TBS

UID
85194
积分
272
TBS
11
智商
2522
节操
1947
海贝
51
阅读权限
30
在线时间
36 小时
注册时间
2015-9-29
最后登录
2017-1-6
26
发表于 2016-3-24 09:44:16 | 只看该作者
厉害

点评

厉害吧  详情 回复 发表于 2016-3-24 11:38
[发帖际遇]: 够枉看到字母和麻瓜幽会,被套套误伤,花费2 TBS买活命丹 幸运榜 / 衰神榜
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复

使用道具 举报

1428

帖子

857

积分

1713

TBS

UID
108004
积分
857
TBS
1713
智商
3772
节操
3695
海贝
375
阅读权限
40
在线时间
303 小时
注册时间
2016-2-18
最后登录
2017-9-9
25
发表于 2016-3-24 09:41:11 | 只看该作者
原来这么流弊
[发帖际遇]: 折纸的筱男孩看见花哥调戏水水,帮忙把风奖赏了1 TBS. 幸运榜 / 衰神榜
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复 支持 反对

使用道具 举报

4万

帖子

8567

积分

2771

TBS

UID
4
积分
8567
TBS
2771
智商
23004
节操
22085
海贝
1676
阅读权限
200
在线时间
3112 小时
注册时间
2014-1-1
最后登录
2024-11-5

在线时间长爱心大使梦殇元老

QQ
24
 楼主| 发表于 2016-3-24 09:20:18 | 只看该作者
wushi001 发表于 2016-3-23 16:41
你干了什么,我不是自己改了么

是啊,先清除了你再设置的
全站禁止灌水,后果自负 月光爆吧器 积分充值 签名档设置 积分记录 新人必备
梦殇qq群 欢迎加入群内禁止传播黄色信息!
①群:515706814 爆吧□顶贴□机器 ②群:94025161 贴吧推广□爆吧□软件 ③群:549343908 营销推广□贴吧□软件
回复 支持 反对

使用道具 举报

4963

帖子

1983

积分

314

TBS

临江仙

UID
108089
积分
1983
TBS
314
智商
1891
节操
1755
海贝
68
阅读权限
50
在线时间
350 小时
注册时间
2016-2-19
最后登录
2018-7-14
QQ
23
发表于 2016-3-23 19:40:31 | 只看该作者
那我发的图,完了
来自安卓客户端来自安卓客户端
千帆水过临江仙。
回复 支持 反对

使用道具 举报

1865

帖子

404

积分

1886

TBS

UID
71715
积分
404
TBS
1886
智商
2370
节操
2014
海贝
103
阅读权限
30
在线时间
96 小时
注册时间
2015-7-20
最后登录
2016-10-26
22
发表于 2016-3-23 16:41:33 | 只看该作者
阿星 发表于 2016-3-23 15:40
被我清除了而已

你干了什么,我不是自己改了么

点评

是啊,先清除了你再设置的  详情 回复 发表于 2016-3-24 09:20
[发帖际遇]: wushi001看到萌萌的小颜熙,陷入无法自拔的暗恋,奖励1 TBS. 幸运榜 / 衰神榜
不要迷恋哥 哥只是个传说
回复 支持 反对

使用道具 举报

1865

帖子

404

积分

1886

TBS

UID
71715
积分
404
TBS
1886
智商
2370
节操
2014
海贝
103
阅读权限
30
在线时间
96 小时
注册时间
2015-7-20
最后登录
2016-10-26
21
发表于 2016-3-23 16:41:04 | 只看该作者
青青子衿。 发表于 2016-3-23 13:50
我转到网页版看了下你的签名Σ(っ °Д °;)っ啥也没看着

不是有吗
[发帖际遇]: wushi001走路走到一半遇到cj怒草坑爹菊花,奖励1 TBS. 幸运榜 / 衰神榜
不要迷恋哥 哥只是个传说
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

GMT+8, 2024-11-6 08:14,Processed in 0.047941 second(s), 42 queries.

Powered by Discuz!X3.4© 2001-2013 Comsenz Inc. 手机版|黑名单|站点地图|RGB转16进制|梦殇国际 MSI

贴吧交流群:172119290 | 编程交流群:232677917 | 官方YY频道:13234704 | 本站所有软件仅供学习交流使用!

工信部备案:赣ICP备14004172号-1 | 如有需要请联系 邮箱:541641237#qq.com (点击发邮件)

快速回复 返回顶部 返回列表