手工短视频论文 聂礼强团队与快手合作,斩获ACM MM 2022最佳论文奖

 网络   2022-10-14 20:26   35

作家 | 施方圆

编写 | 陈彩娴

2022年10月12日晚,ACM Multimedia 大会官方颁布了最好论文等多个奖项。本届 ACM Multimedia 于 2022 年 10 月 10 日至 14 日正在葡萄牙里斯本举办,聚会共领受到了 3009 篇投稿论文,公有13篇论文入选高分论文。

手工短视频论文 聂礼强团队与快手合作,斩获ACM MM 2022最佳论文奖

有 5 篇论文入围最好论文奖(Best Paper Award)候选,个中,哈工大聂礼强教授团队取得了备受夺目的最好论文奖。

聂礼强教授的获奖论文题目为“Search-oriented Micro-video Captioning”,由哈尔滨工业大学(深圳)、山东大学、快手、华为以及佛罗伦萨大学毗连团队独特告竣。

论文地方:https://dl.acm.org/doi/pdf/10.1145/3503161.3548180

该获奖论文先容以下:

这篇论文主要争论若何为“没有视频形容的短视频”主动天生一个文本形容的课题。为了给38%没有文字形容的短视频主动天生有一个抽象的文本形容,争论者经过建立相干模子,从针对于用户搜寻须要的角度主动天生文本去形容一个短视频,以满意用户搜寻视频的各类化须要。

以往处事努力于以实质为导向的视频字幕处事,从创造者的角度天生相干的句子来形容给定视频的视觉实质。这项处事的目的则是以搜寻为导向,经过用户的角度天生枢纽词来归纳给定的视频。除了相干性,各类性对付从分歧角度形容用户的搜寻梦想也相当主要。

为此,争论团队妄图了一个大领域多模态的预锻炼收集,经过五个义务来强化卑劣视频表征,该收集正在争论团队网络的 1100 万个微视频上锻炼。之后,争论团队提出了一种基于流的各类化字幕模子,以根据用户的搜寻须要天生分歧的字幕。该模子经过重修亏空正在先验以及后验之间的KL翻脸施行优化。经过构建由 69 万个 盘诘,短视频 对于组成的黄金数据集中,作家验证了他们的模子,测验了局也证实了其良好性。

据领会,这项处事所研发的“短视频概要天生算法”正在快手失去落地,已稳固运行半年,每日处置约 3 绝对个短视频。

聂礼强教授,西安交通大学本科,新加坡国立大学博士、博士后,两次入选国际级人材讨论,今朝为哈尔滨工业大学(深圳)算计机学院二级教授、博导以及施行院长,兼任 IEEE TKDE 、 ACM ToMM 等汇刊编委,和 ACM MM 2018-2022 范畴主席,2019 年取得 ACM 中国新星奖, 2020 年取得达摩院青橙奖, 2020 年入选《麻省理工科技指摘》“ 35 岁以下科技改革 35 人”中国区榜单。

ACM International Conference on Multimedia (简称 ACM MM, ACM 国际多媒贯通议)自 1993 年创制,是多媒体范畴国际首屈一指的嘉会,旨正在揭示多媒体范畴的迷信迷信创建以及改革工业产物,也是中国算计机学会引荐的该范畴仅有的 A 类国际学术聚会。

参照链接:1.https://2022.acmmm.org/2.https://2022.acmmm.org/best-paper-award/更多实质,点击下方存眷:扫码推广 AI 科技指摘 微记号,投稿 进群:

雷峰网(大众号:雷峰网)

雷峰网版权文章,未经授权允许转载。确定见。

本文地址:http://yz.ziyouea.com/p/34018.html
版权声明:本站文章来自网络,如有违规侵权请联系我们下架。