whatismymovie.com可以通过关键词或描述搜索相应的电影,但它不是一个普通网站,而是一个由AI算法驱动的智能电影搜索引擎。
该搜索引擎由融合AI的算法提供支持,这一算法通过结合自然语言理解、文本识别和模式识别,来理解视频文件内容。这使得查询和结果将以新的方式进行匹配,并能够显示之前无法搜索的数据。
支持该站点的技术来自芬兰奥卢大学(University of Oulu)旗下的AI视频初创公司Valossa,该公司也是NVIDIA初创加速计划的成员。其首席执行官兼联合创始人Mika Rautiainen对whatismymovie.com能够帮助用户查找电影感到非常满意,但这家公司的志向不仅局限于此。
“人们正通过描述来查找那些记不起名字的电影。”Rautiainen说道。
除了帮助粉丝找到电影以外,Valossa还致力于应用自身技术帮助媒体单位及传媒公司更好地了解其媒体资产,从而了解观众会如何因所观看的内容而受到影响。例如,当某位演员出现在屏幕上时,观众的情绪会如何变化。最终可以在观众注意力下降时将内容迅速进行调整,使得在线投放的内容及广告更加有趣、有效,并取得更高的内容收益。
Rautiainen表示:“广播公司和其他视频内容公司可以从每一秒播放的内容中提取数据并将其与行为关联起来。他们正在寻找任何有用的信息,以帮助他们进一步扩大其内容影响力。”
电影搜索只是冰山一角
在参加马里兰大学的研究交流项目期间,Rautiainen开始研究“语义视频理解”。在这里,他研究了用于检测视频内容中物体和活动(例如爆炸)的算法,并致力于打造以标准化视频搜索问题为基准的搜索引擎。2010年,他和他的研究团队开始同芬兰国家广播公司Yle合作,将广播视频编入索引并使其可被搜寻。
当新一代机器学习和AI首次在科学界崭露头角的时候,Rautiainen便开始研究如何将自己的工作与新型AI技术结合起来,并且开始组建现在的Valossa团队。他选择将公司设立在前诺基亚小镇奥卢,因为那里有大量技术高超的视频工程师和计算机视觉研究人员。
Valossa推出的首款Valossa AI是一种云服务产品,该服务由运行在Amazon WebServices云上的GPU集群加速。借助该产品,媒体公司能够了解多种信息,比如视频中最出色的演员、他们在屏幕上出现的时间、地点以及视觉环境(例如树叶或城市建筑的出现)。
此外,该产品还可以分析说话内容和背景声音并将其编入索引。他们最近发布了视频洞察工具,可通过可视化报表、场景级搜索和仪表板概览检查视频内容。将这些见解与用户的行为数据相结合,可为内容决策提供参考。
在内部,该公司正在本地和云中使用NVIDIA GPU来加速训练其深度学习算法。与CPU相比,性能至少提升30倍。
显著加快速度
这种显著提速使得Valossa AI引擎能在短短10分钟内为其在60分钟的视频中看到的所有内容建立索引和添加注释。而如果使用CPU,可能要花费两个多小时才能完成任务,并且所需成本更高。任何人都可以访问Valossa网站并注册,免费利用该公司的深度学习技术分析视频,实时查看技术进展。
各公司可以根据视频内容的处理时间按分钟或小时数支付服务费用,或者具有持续的海量视频处理需求的客户也可采用订阅模式。用户可以登录门户网站,通过预览的方式了解互动式视频洞察工具。此外,Valossa还提供本地安装软件供企业使用。
Rautiainen预计,由于越来越多的企业想要通过对视频的智能分析获取价值,因此未来Valossa技术吸引的客户将会远远超过传媒公司这一类。他们将能够了解内容展示会如何影响观众,并做出实时调整。
Rautiainen说:“我们正在帮助人们了解他们的内容数据是如何构建的,并发现这些结构和实际影响之间的关系。”
初创加速计划
NVIDIA的初创加速计划中有2200多家初创公司,Valossa也是其中一员。初创加速计划为初创公司提供技术、专业知识和营销支持。
- 算法
+关注
关注
23文章
4528浏览量
91780 - AI
+关注
关注
87文章
28468浏览量
265753 - 自然语言
+关注
关注
1文章
279浏览量
13275
原文标题:电影分析大师:AI通过视频数据帮助预测观众行为
文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。
发布评论请先登录
相关推荐
评论