科技工作者之家
科技工作者之家APP是专注科技人才,知识分享与人才交流的服务平台。
科技工作者之家 2017-07-22
张兆田 信息科学部
北京大学彭宇新教授团队(PKU_ICST)参加了2016年国际评测TRECVID(TREC Video Retrieval Evaluation)视频搜索比赛(Instance Search),在其全部2项评测---计算机自动搜索和交互式搜索中,均获得第一名。这是彭宇新团队自2009年连续多年参加TRECVID获得多项第一名后,再次获得的优异成绩。视频搜索比赛历年参赛队伍包括卡内基梅隆大学、斯坦福大学、牛津大学、IBM Watson研究中心、微软等国际著名大学和企业,2016年共有30支队伍参加了该比赛。
TRECVID由美国国家标准技术局(NIST)2001年发起,每年举行一次,是迄今为止影响力最大的全球视频内容分析比赛(http://trecvid.nist.gov)。Instance Search比赛内容是计算机如何在图像查询条件下,从人类语义的角度搜索语义相关的视频,涉及下一代多媒体搜索引擎和人工智能的关键技术。TRECVID 2016的Instance Search比赛数据集是BBC的464小时视频内容,有47万多个视频镜头。NIST定义了30个语义事件,每个语义事件同时包括人物和场景两个查询条件,要求在大规模数据下搜索出包含这些语义事件的视频,最终根据30个语义事件的总评测结果进行排名。
图像、视频等多模态数据已经占到大数据的80%以上。近年来彭宇新团队针对互联网多模态内容分析与识别难题,提出了基于注意力模型和增量深度学习的图像视频分类方法,解决了新增概念的训练加速和动态扩容难题;提出了级联分类器与极角拓扑约束相结合的判别方法,提高了视觉目标检测效果;提出了基于多模态融合与增量多索引磁盘哈希的语义协同方法,通过跨模态语义互补性实现多模态数据的综合利用。相关研究成果发表在IEEE Trans.等国际权威期刊和CVPR、ACM-MM等重要国际会议上,研制的互联网多模态内容分析与监管系统等在国家一些重要部门得到应用。
上述研究得到国家自然科学基金项目(项目资助号:61371128,61532005)等资助。
比赛结果见链接:http://www-nlpir.nist.gov/projects/tvpubs/tv16.slides/tv16.ins.slides.pdf
来源:国家自然科学基金委员会
原文链接:http://www.nsfc.gov.cn/nsfc/cen/00/kxb/xx/dongtai20161219_03.htm
版权声明:除非特别注明,本站所载内容来源于互联网、微信公众号等公开渠道,不代表本站观点,仅供参考、交流、公益传播之目的。转载的稿件版权归原作者或机构所有,如有侵权,请联系删除。
电话:(010)86409582
邮箱:kejie@scimall.org.cn
戈新生等:挠性航天器动力学模型的非约束模态分析
正则模态分析
CCAI 2019 | 何晓冬:自然语言处理帮助人类更好的连接世界
孙铁志等:基于动力学模态分解法的绕水翼非定常空化流场演化分析
自动化所类脑智能研究中心在类脑信息处理领域取得新进展
【CSIG云讲堂】7月7日19点,刘偲副教授主讲:跨模态智能分析
多模态地理大数据时空分析方法及研究方向
【CSIG云讲堂】8月4日19点,隋婧主讲:精神疾病的影像学标记检测——基于多模态脑影像的融合分析与预测技术
自然语言处理新方法:词汇表示、信息抽取研究进展
空天院科研人员建立中国区域气溶胶“基础模态”模型