助力腾讯体育 IBM借助AI提高你的观赛体验

IBM AI Vision视觉大脑已经是一个比较成型完善的人工智能视频深度学习平台,可以帮助企业自动地完成个性化的机器学习,开箱即用。

转自腾讯视频

随着本赛季NBA总决赛G3第四节最后一分钟杜兰特的三分命中,勇士毫无疑问的杀死了本场比赛,拿下赛点并最终夺冠。

这一精彩镜头在赛后被腾讯体育回放了多次,而对NBA球迷来说,“死神”杜兰特的威力可见一斑。

除了场上云集的大牌球星,人工智能的技术加持才是为观众提供独特观赏体验保驾护航的“隐形使者”。

在这背后的,便是IBM与腾讯的深度合作。

腾讯自2015年成为NBA中国数字媒体独家官方合作伙伴以来,不仅提供赛事直播服务,更通过对内容和技术的探索不断升级用户体验,让在线观赛成为广大球迷的习惯。

而作为25年来一直高居美国专利排行榜首位的全球科技公司,IBM凭借在技术领域持续创新,在人工智能领域不仅改变着企业的工作模式,而且能够增强员工的专业技能并辅助专业人士做出更加精准的决策。

以此为基础,IBM作为腾讯体育人工智能视频分析及剪辑合作伙伴,以领先的人工智能视觉识别、理解和剪辑技术平台——IBM AI Vision视觉大脑,为腾讯NBA编辑团队定制AI视频剪辑方案,使海量历史赛事视频资料变得可搜索可随需提取,让每一帧每一秒的视频价值最大化,将为1.25亿篮球迷提供最符合他们期待的在线观赛新体验。

值得一提的是,以人工智能技术剪辑体育赛事视频,这在国内还尚属首次。

根据市场调研机构Statista预测,中国在线市场规模将在2018年达到1130亿元规模,在2019年达到1460亿元规模。在线视频市场的井喷式增长,表明其在各个行业正在发挥着重要价值,以及预示着通过对视频数据进行管理和挖掘,将产生无限潜能。

也就是说,在线视频与体育直播的结合是现阶段最具价值和潜力的方式。

我们可以发现,无论是视频网站还是网络电视平台,它们均拥有海量的历史视频数据,且数据量在分秒间不断攀升,被用户高频调取的数据仅占总量的20%。而如何盘活数据转化为商业价值,最终为用户带来优质的观看体验,各家都在苦心寻求解决方案。

IBM率先做出了表态。

IBM AI Vision视觉大脑通过机器学习能看懂篮球、了解规则、识别动作、判断得分失误。

本赛季NBA总决赛期间,IBM AI可以根据腾讯篮球迷中呼声最高的七大球星特质(全面、精准、霸气、杀气、强硬、坚定、稳定),向腾讯编辑学习这些特质背后的篮球比赛画面和视频镜头语言。

随后IBM AI基于腾讯NBA 数据库69年积累的超过21亿秒的篮球比赛视频素材,能实时识别出这7位球星(库里、詹姆斯、杜兰特、哈登、保罗、乐福、汤普森),精确标注并剪切出他们的特色动作(后撤步投篮、╣ó篮、三分球等)和表情(咆哮、兴奋、开心等),并最终为每位球星剪辑出45秒的视频集锦。

有趣的是,IBM AI Vision视觉大脑能在比赛直播过程中,实时完成视频的识别和剪切工作,比赛结束20秒之内就能按照人的灵感和要求组合成片。杜兰特获颁奖后,腾讯体育即刻直播的其过去11年成长史视频就是人机协作打造的、国内首支由AI剪辑的篮球MVP视频。

转自腾讯视频

所以在本赛季NBA总决赛期间,我们便能在极短的时间看到库里、詹姆斯、杜兰特的精彩表现集锦,IBM AI在此功不可没。

来自IBM中国研究院的IBM AI Vision视觉技术从建模、剪切、编辑成片三个环节拆解项目难题,学习并针对不同主题剪辑精彩的比赛视频。

首先在建模阶段,在一个月时间,通过少量视频数据完成建模,让机器学习看懂篮球。通过“多模态视觉理解技术”对视频画面进行“像素级跟踪、识别”,包括球员的人脸识别、人的动作识别(扣篮、投篮、空中接力、上篮、飞身救球、庆祝)、人的表情识别(怒吼/咆哮、悲伤、开心、搞怪)、物体识别(球场、篮球、篮筐、球衣号码);并分析判断背后的相关性,人的动作和物体之间运动关系的逻辑,比如在有遮挡动作中判断谁是主攻手,他的投篮动作是否成功。

通过这一步,相当于训练了一个篮球视频的“AI剪辑师”。

其次是剪切,IBM AI会对过去69年20个球员的数百万分钟篮球比赛中的每一帧视频数据进行多通道分析并打上标签,包括人物、运动轨迹、声音等,将非结构化视频数据提取为结构化数据,并用数据库进行实时管理,让每一帧画面都变得可检索。同时,还会针对动作的精彩程度和不同的主题(“灵动”、“霸气”、“全面”、“坚定”、“强硬”、“精准”等)匹配程度生成综合评价。

完成以上两个步骤后,第三便是编辑成片。

这一步操作是人与机器协作完成筛选、拼接、成片。体育编辑设置好所需要的主题和球员等应用场景要求,“AI剪辑师”按照综合评分选出最贴切主题的精彩视频片段,几乎实时自动生成一分钟剪辑视频,并加上特效处理。2-3小时的实时比赛,经过IBM AI视觉大脑仅仅20秒钟处理,即可输出1分钟成片。

以此流程反复,机器会根据观众对视频的需求做总结,不断优化更新建模,输出的成品视频将更贴合用户的需求。

作为国内首次以人工智能技术剪辑的体育赛事视频,这一技术还可运用到用人工智能来完成复杂场景的视频剪辑。

据悉,IBM AI Vision视觉大脑已经是一个比较成型完善的人工智能视频深度学习平台,可以帮助企业自动地完成个性化的机器学习,开箱即用。赋能企业自主对影像进行深度学习,IBM无需做大量的跟进服务。

对比行业内其他视觉识别技术,IBM的多模态影像分析相对更加复杂,分析维度更加全面, 可自动优化的程度更加领先, 可自动获得的机器理解准确率更加高。而且,此技术凭借适配强的特点,企业数据可以选择性放在云端或者自有服务器上。安全性有保障,企业不必担心存在泄露数据的风险。

有互联网从业人士表示,IBM与腾讯体育的合作以观众想法为唯一出发点,定制了角度随心调取亿万级视频素材库的资源。让体育赛事因每位观众而焕发新的魅力,让腾讯将赛事直播做得更加有趣。

此类合作还能挖掘了视频数据的最大化价值,让素材库中的每一分每一秒都调动了起来,还大大减少了人力成本,缩短了工作时间。

多年来,IBM与包括足球、高尔夫、网球等赛事的长线合作,以技术推动体育产业发展。

6月9日腾讯体育公众号曾发布,腾讯网络媒体事业群内容商业化中心副总经理丁明锐表示:“腾讯丰富的内容,为品牌营销创造了多触点。篮球赛是一个融合视听、交互、氛围的跨界综合体,本次合作IBM的AI技术与腾讯的平台资源相得益彰,科技借体育大事件发声,同时为观众带来了创新的观赛体验。这不仅是提升用户体验的一次有效尝试,也是科技与体育跨界融合的范例。”

IBM副总裁,大中华区首席技术官,中国研究院院长沈晓卫表示:“IBM作为一家科技公司,拥有多元化的高精尖人才,持续发力人工智能领域。IBM中国研究院致力于人工智能技术的创新与应用,包括利用人工智能视觉、听觉、自然语言理解、对话交互等技术创新赋能专业人士,助力行业用户在多模态数据中创造价值,并实现更高效的行业创新和产业升级。”

更多精彩内容请点击
http://nbafans.act.qq.com/ibm/

(文内部分内容 引自腾讯体育公众号)

未经正式授权严禁转载本文,侵权必究。

IBM

3.9k
  • 美股收评:三大指数集体下跌,道指跌0.98%,Meta大跌逾10%
  • IBM股价开盘下跌9%,至1月以来最低水平

评论

暂无评论哦,快来评价一下吧!

助力腾讯体育 IBM借助AI提高你的观赛体验

IBM AI Vision视觉大脑已经是一个比较成型完善的人工智能视频深度学习平台,可以帮助企业自动地完成个性化的机器学习,开箱即用。

转自腾讯视频

随着本赛季NBA总决赛G3第四节最后一分钟杜兰特的三分命中,勇士毫无疑问的杀死了本场比赛,拿下赛点并最终夺冠。

这一精彩镜头在赛后被腾讯体育回放了多次,而对NBA球迷来说,“死神”杜兰特的威力可见一斑。

除了场上云集的大牌球星,人工智能的技术加持才是为观众提供独特观赏体验保驾护航的“隐形使者”。

在这背后的,便是IBM与腾讯的深度合作。

腾讯自2015年成为NBA中国数字媒体独家官方合作伙伴以来,不仅提供赛事直播服务,更通过对内容和技术的探索不断升级用户体验,让在线观赛成为广大球迷的习惯。

而作为25年来一直高居美国专利排行榜首位的全球科技公司,IBM凭借在技术领域持续创新,在人工智能领域不仅改变着企业的工作模式,而且能够增强员工的专业技能并辅助专业人士做出更加精准的决策。

以此为基础,IBM作为腾讯体育人工智能视频分析及剪辑合作伙伴,以领先的人工智能视觉识别、理解和剪辑技术平台——IBM AI Vision视觉大脑,为腾讯NBA编辑团队定制AI视频剪辑方案,使海量历史赛事视频资料变得可搜索可随需提取,让每一帧每一秒的视频价值最大化,将为1.25亿篮球迷提供最符合他们期待的在线观赛新体验。

值得一提的是,以人工智能技术剪辑体育赛事视频,这在国内还尚属首次。

根据市场调研机构Statista预测,中国在线市场规模将在2018年达到1130亿元规模,在2019年达到1460亿元规模。在线视频市场的井喷式增长,表明其在各个行业正在发挥着重要价值,以及预示着通过对视频数据进行管理和挖掘,将产生无限潜能。

也就是说,在线视频与体育直播的结合是现阶段最具价值和潜力的方式。

我们可以发现,无论是视频网站还是网络电视平台,它们均拥有海量的历史视频数据,且数据量在分秒间不断攀升,被用户高频调取的数据仅占总量的20%。而如何盘活数据转化为商业价值,最终为用户带来优质的观看体验,各家都在苦心寻求解决方案。

IBM率先做出了表态。

IBM AI Vision视觉大脑通过机器学习能看懂篮球、了解规则、识别动作、判断得分失误。

本赛季NBA总决赛期间,IBM AI可以根据腾讯篮球迷中呼声最高的七大球星特质(全面、精准、霸气、杀气、强硬、坚定、稳定),向腾讯编辑学习这些特质背后的篮球比赛画面和视频镜头语言。

随后IBM AI基于腾讯NBA 数据库69年积累的超过21亿秒的篮球比赛视频素材,能实时识别出这7位球星(库里、詹姆斯、杜兰特、哈登、保罗、乐福、汤普森),精确标注并剪切出他们的特色动作(后撤步投篮、╣ó篮、三分球等)和表情(咆哮、兴奋、开心等),并最终为每位球星剪辑出45秒的视频集锦。

有趣的是,IBM AI Vision视觉大脑能在比赛直播过程中,实时完成视频的识别和剪切工作,比赛结束20秒之内就能按照人的灵感和要求组合成片。杜兰特获颁奖后,腾讯体育即刻直播的其过去11年成长史视频就是人机协作打造的、国内首支由AI剪辑的篮球MVP视频。

转自腾讯视频

所以在本赛季NBA总决赛期间,我们便能在极短的时间看到库里、詹姆斯、杜兰特的精彩表现集锦,IBM AI在此功不可没。

来自IBM中国研究院的IBM AI Vision视觉技术从建模、剪切、编辑成片三个环节拆解项目难题,学习并针对不同主题剪辑精彩的比赛视频。

首先在建模阶段,在一个月时间,通过少量视频数据完成建模,让机器学习看懂篮球。通过“多模态视觉理解技术”对视频画面进行“像素级跟踪、识别”,包括球员的人脸识别、人的动作识别(扣篮、投篮、空中接力、上篮、飞身救球、庆祝)、人的表情识别(怒吼/咆哮、悲伤、开心、搞怪)、物体识别(球场、篮球、篮筐、球衣号码);并分析判断背后的相关性,人的动作和物体之间运动关系的逻辑,比如在有遮挡动作中判断谁是主攻手,他的投篮动作是否成功。

通过这一步,相当于训练了一个篮球视频的“AI剪辑师”。

其次是剪切,IBM AI会对过去69年20个球员的数百万分钟篮球比赛中的每一帧视频数据进行多通道分析并打上标签,包括人物、运动轨迹、声音等,将非结构化视频数据提取为结构化数据,并用数据库进行实时管理,让每一帧画面都变得可检索。同时,还会针对动作的精彩程度和不同的主题(“灵动”、“霸气”、“全面”、“坚定”、“强硬”、“精准”等)匹配程度生成综合评价。

完成以上两个步骤后,第三便是编辑成片。

这一步操作是人与机器协作完成筛选、拼接、成片。体育编辑设置好所需要的主题和球员等应用场景要求,“AI剪辑师”按照综合评分选出最贴切主题的精彩视频片段,几乎实时自动生成一分钟剪辑视频,并加上特效处理。2-3小时的实时比赛,经过IBM AI视觉大脑仅仅20秒钟处理,即可输出1分钟成片。

以此流程反复,机器会根据观众对视频的需求做总结,不断优化更新建模,输出的成品视频将更贴合用户的需求。

作为国内首次以人工智能技术剪辑的体育赛事视频,这一技术还可运用到用人工智能来完成复杂场景的视频剪辑。

据悉,IBM AI Vision视觉大脑已经是一个比较成型完善的人工智能视频深度学习平台,可以帮助企业自动地完成个性化的机器学习,开箱即用。赋能企业自主对影像进行深度学习,IBM无需做大量的跟进服务。

对比行业内其他视觉识别技术,IBM的多模态影像分析相对更加复杂,分析维度更加全面, 可自动优化的程度更加领先, 可自动获得的机器理解准确率更加高。而且,此技术凭借适配强的特点,企业数据可以选择性放在云端或者自有服务器上。安全性有保障,企业不必担心存在泄露数据的风险。

有互联网从业人士表示,IBM与腾讯体育的合作以观众想法为唯一出发点,定制了角度随心调取亿万级视频素材库的资源。让体育赛事因每位观众而焕发新的魅力,让腾讯将赛事直播做得更加有趣。

此类合作还能挖掘了视频数据的最大化价值,让素材库中的每一分每一秒都调动了起来,还大大减少了人力成本,缩短了工作时间。

多年来,IBM与包括足球、高尔夫、网球等赛事的长线合作,以技术推动体育产业发展。

6月9日腾讯体育公众号曾发布,腾讯网络媒体事业群内容商业化中心副总经理丁明锐表示:“腾讯丰富的内容,为品牌营销创造了多触点。篮球赛是一个融合视听、交互、氛围的跨界综合体,本次合作IBM的AI技术与腾讯的平台资源相得益彰,科技借体育大事件发声,同时为观众带来了创新的观赛体验。这不仅是提升用户体验的一次有效尝试,也是科技与体育跨界融合的范例。”

IBM副总裁,大中华区首席技术官,中国研究院院长沈晓卫表示:“IBM作为一家科技公司,拥有多元化的高精尖人才,持续发力人工智能领域。IBM中国研究院致力于人工智能技术的创新与应用,包括利用人工智能视觉、听觉、自然语言理解、对话交互等技术创新赋能专业人士,助力行业用户在多模态数据中创造价值,并实现更高效的行业创新和产业升级。”

更多精彩内容请点击
http://nbafans.act.qq.com/ibm/

(文内部分内容 引自腾讯体育公众号)

未经正式授权严禁转载本文,侵权必究。