阿里 AI 现身冬奥 剪出近 4 万条精彩集锦视频
发表于:2024-12-21 作者:创始人
编辑最后更新 2024年12月21日,北京冬奥昨日结束,17 天的赛事精彩纷呈,各种集锦视频也引爆新媒体平台,其中不少可能是阿里 AI 的"作品"。因为能理解比赛内容、分析运动员动作,阿里 AI 实时生成多种类型的集锦视频,冬奥期间共生产
北京冬奥昨日结束,17 天的赛事精彩纷呈,各种集锦视频也引爆新媒体平台,其中不少可能是阿里 AI 的"作品"。因为能理解比赛内容、分析运动员动作,阿里 AI 实时生成多种类型的集锦视频,冬奥期间共生产出 39878 段素材,时长超过 200 小时,覆盖超 200 场比赛。
为了让冬奥赛事短视频内容兼顾"实效、精彩、人文、美学",央视体育新媒体、总台技术团队、阿里云、阿里巴巴达摩院联合打造出"AI 云智剪"。这款产品可以实时解析并提取赛事视频中的运动员信息、精彩动作、镜头类型、赛程信息、运动员特点等,犹如庖丁解牛。并且,AI 还能像裁判一样对比赛的精彩程度进行打分,给各种视频素材调整权重,最终根据主题需求生产出丰富多样的集锦视频。
经过训练,AI 剪辑还能呈现体育的美感。针对冰球、花滑、速滑、短道速滑等,设置有主题"冰之舞";针对单板滑雪和自由滑雪,则有主题"雪之舞"。此外,还从速度型赛事的特殊视角,如花滑的旋转、冰球的进球等,呈现"速度之美";对于跳跃性动作丰富的滑雪赛事,则塑造"凌空之美"。
依托阿里云强大的流媒体处理能力,直播过程中即可实时生成集锦素材,提升了媒体抢占先机的能力和观众享受冬奥赛事的体感。冬奥期间,阿里 AI 一共生产出 39878 段视频素材,时长超过 200 小时,覆盖 200 场以上的比赛,部分发布于央视体育新媒体平台。
央视体育 App 发布
据专家介绍,AI 快剪的背后是达摩院自研的视频理解技术 EMC2,只需要一个基于预训练-多分枝的 AI 计算模型即可完成多赛事、多来源、多种类的内容理解,单模型效果媲美多模型,且速度更快。EMC2 曾在计算机视觉领域顶级会议 CVPR2021 中获得 5 项竞赛冠军,领先业界。
AI 云智剪流程图
2022-05-06 00:35:39