欢迎来到池州三陆五信息科技有限公司- 未来科技

微信
手机版
网站地图

quot; 维之间“;目标检测模型hold生活在各种画风中,并且可以识别真实的赛博蒂拉诺梵高的画复旦出身的一部作品在线Demo可以玩-量子位,

2023-04-13 09:49:42 栏目 : 网络动态 围观 : 0次

AI的目标检查种类有20000+种,你看过吗?

不仅能准确地“捏出”每个物体所在的位置,而且分类效果也非常准确。

插图版赛博提拉诺也没问题:

杂志封面和漫画中的物体都能检测出来!

这也是在花游戏中检测到目标的,据作者说,长尾问题等细节上的模型处理得非常好,像狮子和狐狸这样的少样本也能正确识别

这项研究来自Meta AI和德克萨斯大学奥斯汀分校,一部是著名的目标检测框架CenterNet的作者,复旦出身的Xingyi Zhou。

我们一起看看吧。

在一篇可以识别“跨维”物体的论文中,我们提出了一种新的Detic方法来解决不能用于图像级标签(标记整个图像,标记里面有什么)目标检测的问题。

迄今为止的目标检测方法通常是一个检测框中的一个物体。

该方法存在这样的问题:不能利用整个图像级标签,只能用单个物体的图像进行训练。

一些研究试图进行弱监控学习,让AI自己学会将图像级标签对应于锚框中的是什嚒,其实这种方法的效果也不是很好。

Detic方法使用目标检测数据(a)和图像标签数据)b)对Detic进行混合训练。

其中,在用目标检测数据训练Detic时,同时训练图像分类模块w和目标检测模块b,但仅用标签数据训练图像分类模块w。

培训的数据集采用ImageNet,经验证,该模型在培训后无需微调,即可很好地适应LVIS等数据集,对以前的一些模型有很好的效果:

根据论文,Detic能分类的图像的类型也各种各样,从实际的照片到象赛博的插图一样的「超越了次元的」作品能识别。

这很快就吸引了很多网友来玩。

在线Demo是网友用梵高的世界名画尝试的。

放大来看,艺术加工的椅子,人和桌子也可以识别:

有些人用二维龙猫来识别。除了龙猫本身被误认为猫头鹰以外,伞和靴子也不错。

我们也随便用表壳的照片试了一下。在线Demo的检测时间稍长,大约需要6分钟左右,但很有效:

仔细一看,你会发现一些缺陷,比如把手表的一部分误认为是转速表,还有怀表和手表,还有一两个没有检测出来的手表。

但是,即使是二维和插图,这个AI能识别的物体,至少需要在真实世界中出现。

例如吐火焰的龙和皮卡丘等超过20000个分类的物体,不属于AI的监视对象,全部被识别为猴子(狗的头):

这些二维角色也放入AI训练数据集,不知道能不能得到同样的检查效果。

作者介绍

(这张照片是她拍的。)

论文为Xingyi Zhou,目前在德克萨斯大学奥斯汀分校读博学,本科就读于复旦大学计算机系,以前也是CenterNet论文的第一作者,项目在GitHub目前获得6.1k Star。

Rohit Girdhar、Armand Joulin和Ishan Misra、Meta AI的研究科学家,主要研究方向是机器学习和计算机视觉,此前Armand Joulin在李飞飞的实验室里充当博士后。

Philipp Krhenbühl,德克萨斯大学奥斯汀分校助理教授,Xingyi Zhou的指导者。研究方向是计算机视觉,机器学习,计算机图形。

有兴趣的朋友,试着尝试一下想马上玩的漫画和杂志的插图吧~

Demo礼服:https//huggingface.co/spaces/Akhaliq/detic

论文地址:https://arxiv.org/ABS/2201.02605

参考链接:[1]https://www.cs.utexas.edu/~zhouxy/[2]https://Twitter.com/AK92501/status/1480704961010101

展开剩余内容

分享到:

猜你喜欢

  • b2b网站策划书_b2b策划案

    b2b网站策划书_b2b策划案大家好,今天我来给大家讲解一下关于b2b网站策划书的问题。为了让大家更好地理解这个问题,我将相关资料进行了整理,现在就让我们一起来看看吧。文章目录...

    2024-10-22 企业 网站
  • 浙江高端网站_浙江高端网站有哪些

    浙江高端网站_浙江高端网站有哪些好久不见了,今天我想和大家探讨一下关于“浙江高端网站”的话题。如果你对这个领域还不太了解,那么这篇文章就是为你准备的,让我们一看看吧。文章目录列...

    2024-10-22 网站 浙江
  • 做酒的网站_做酒的网站有哪些

    做酒的网站_做酒的网站有哪些希望我能够回答您有关做酒的网站的问题。我将根据我的知识库和研究成果回答您的问题。文章目录列表:1.酒仙网CEO郝鸿峰的电商百亿梦想2.有没有关于介绍...

    2024-10-22 中国 酒类 酒仙 网站
  • 索尼手机软件_索尼手机软件商店

    索尼手机软件_索尼手机软件商店下面,我将为大家展开关于索尼手机软件的讨论,希望我的回答能够解决大家的疑问。现在,让我们开始聊一聊索尼手机软件的问题。文章目录列表:1.索尼的手机...

    2024-10-22 手机 索尼
热门标签