你在视频直播什么 Twitter人工智能一眼就能看穿

 邮箱网  0条评论  2575次浏览  2016年04月30日 星期六 20:24

分享到: 更多
中国邮箱网讯 4月30日消息,借助Twitter人工智能团队开发的一项新技术,对流媒体直播的搜索将成为可能。

随着Twitter旗下Periscope、Meerkat,以及Facebook Live等服务的发展,流媒体直播正越来越受欢迎。然而,视频直播通常并不会附带标签,也缺乏良好的分类。这往往是由于,在摄像头开启之前,人们并不清楚他们将要直播什么。

Twitter的Cortex人工智能团队开发了一种算法,能实时识别直播视频中的内容。例如,算法可以知道,视频中有位明星正在弹吉他,或是正在演示一款强大的工具。


Cortex的技术负责人克莱门特·法拉贝特(Clement Farabet)表示:“Periscope上的内容总是在变化,而直播视频都是如此。”法拉贝特演示了这项技术。对于20多个Periscope视频直播,这一技术进行了实时标记。

识别视频直播中的内容,这类技术正越来越受关注。近几年,研究人员开发了多种算法,用于识别静态照片中的对象。不过,识别不同质量视频中的内容更困难。视频的实时识别需要强大的计算能力。

Twitter成功开发了一台订制的超级计算机。这台计算机基于GPU(图形处理单元),能进行视频分类并展示结果。在从事与深度学习相关的数学计算时,这些芯片非常高效。但一般情况下,它们只是大型计算机系统的一部分。

专注于内容个性化研究的匹兹堡大学教授皮特·布鲁希洛夫斯基(Peter Brusilovsky)表示:“即使是就静态视频而言,情况也极具挑战。而对于实时视频,这项技术需要庞大的计算能力。”

他指出,业内目前急需更强大的视频识别技术。他表示:“视频通常难以迅速浏览,因此推荐非常重要。这是视频领域缺失的一环。”

目前的视频推荐技术通常是根据用户的品味向其展示相关视频。这样的推荐常常不准确,而直播视频也无法采用这种机制。

Twitter视频直播服务PeriscopeTwitter视频直播服务Periscope

Cortex团队希望开发更精确的推荐系统,基于用户此前的活动向他们推荐内容。

该团队开发的视频识别技术尚未被用于Twitter的任何产品。不过,Periscope已开始测试这项技术。这项技术基于深度学习算法,而视频标记中包含复杂的语义理解。例如,一段小猫的视频中可能出现的标签不仅仅是“猫”,还会有“动物”和“哺乳动物”等。

目前,视频直播正成为社交媒体行业的重要一部分。Twitter于2015年1月收购了Periscope,当时该应用尚未上线。有报道称,当时的收购价格超过5000万美元。在此之前,另一款视频直播应用Meerkat取得了极大的成功。Facebook于2015年初推出了自主的视频直播服务。本月早些时候,Facebook将这项功能放在了主页所有人都能看到的位置,以加大推广力度。

不过,这类技术尚未尝试商业化。Periscope目前没有提供广告,但不难想象,这类工具对广告主来说将会很有用:通过算法匹配的广告可以与视频内容结合在一起。随着越来越多的视频出现在网上,算法可以帮助Twitter针对内容去订制广告,提高效率。值得指出的是,本月Twitter赢得了美国橄榄球大联盟(NFL)的比赛直播权。

哈佛大学伯克曼中心助理教授、在线媒体和广告专家本·埃德尔曼(Ben Edelman)表示,Twitter开发的技术可用于过滤侵权内容,以及色情和暴力内容。

不过,法拉贝特希望通过这项技术去了解人们想要看什么。“不管制作人是谁,制作时间是何时,真正了解你的兴趣点是什么,这是我们真正想要获得的基础能力。”





文章来源:新浪科技

标签:Twitter

我的评论:

请  后发表评论。