Email us at : 1276050739@qq.com

当前位置:主页 > 365体育投注新闻 >

365体育投注新闻

联系我们

公司总机: 0576-87254168

咨询邮箱:1276050739@qq.com

公司地址:浙江省玉环市海洋经济转型升级示范区(坎门)

365体育投注快手Y-tech万鹏飞:短视频UGC智能创作

2021-07-18

  克日,2021环球野生智能手艺大会在杭州召开。本次大会聚集来自天下各地的野生智能范畴专家,配合为野生智能的将来开展建言献策。在6月5日召开的计较机视觉专题论坛上,快手Y-tech部分AI手艺平台卖力人万鹏飞受邀揭晓了题为《短视频UGC智能创作中的计较机视觉手艺》的演讲,从财产的角度分享了计较机视觉手艺在短视频智能创作标的目的的使用和开展趋向。

  作为百姓短视频社区,快手用户日均利用时长99.3分钟,团体日活达3.792亿。在宏大的用户与流量根底上,快手构成了富有生机的内容创作生态,平台内有300亿+原创视频库存,每个月新增创作者1000w+。此中大部分内容是广阔一般用户创作的,即UGC(User Generated Content)。据万鹏飞引见,UGC夸大人机协同,内容创作的主体是人,手艺帮助人做创作;智能创作则夸大手艺有必然的主动化才能,可在内容创作中起到“降本增效”的感化。对应到实践产物中,快手系产物的UGC智能创作次要涵盖了三大类功用:人像美化功用、影音殊效功用和自力创作东西。

  人像美化功用:快手的人像美化功用包罗美颜、美型、美体、美妆、滤镜、画质加强等。除典范的基于图形图象处置的手艺计划外,快手将基于深度进修的CV手艺融入到了人像美化中,大幅提拔了用户体验。比方用神经收集来进步人像照片的画质或让照片中的人更年青,和经由过程情况光照估量使美妆结果在实践场景中愈加天然等。

  影音殊效功用:除常见的各类人脸AR粉饰外,殊效功用的寄义十分普遍,包罗但不限于各类弄法道具、贴纸动效、视频模板和小游戏等。比方万物AR弄法是用摄像头扫描通用物体并触发结果(如让湿纸巾舞蹈),活照片弄法可使一张图根据特定方法动起来(如前阵子很火的“蚂蚁呀嘿”),这些都是殊效手艺的范畴。

  自力创作东西:快手此前曾经推出“快影”和“一甜相机”等多款受欢送的东西产物协助用户停止视频和图象的专业创作,近来还刚公布了一款主打高清修图的“原片”app。除这些产物外,此次大会上万鹏飞重点引见了别的两个比力出格的自力创作东西。

  第一个是假造偶像创立和开播东西—A站面捕助手,用户能以很低的本钱缔造本人的假造形象,并让假造形象随着本人动起来,停止直播互动和内容消费。大大低落了一般人或商家具有和运营属于本人的假造偶像的门坎。

  第二个是快手殊效开放平台—必扬殊效平台,在这个平台上,人们能够设想和缔造本人的殊效弄法,公布到快手让更多验,并可得到平台鼓励。经由过程这个方法,短视频平台、殊效创作者、殊效消耗者构成了一个互利双赢的生态。

  短视频UGC智能创作各类功用的完成大多依托于(但不只限于)计较机视觉手艺,即CV手艺。在演讲中,万鹏飞从财产使用的角度,根据感知与重修手艺、365体育投注情况感知与重修手艺、像素级语义阐发、天生式手艺和多模态手艺这五个手艺标的目的停止了引见。

  /情况感知与重修手艺:感知和重修是智能创作的主要条件,也是CV范畴的主要课题。次要包罗点/框检测、物体/场景辨认、行动捕获、VO/SLAM、3D重修等,这些根底CV手艺有力保证了快手用户的创作体验。

  像素级语义阐发:这方面用处最广的是朋分手艺,俗称抠图。除比力常见的人像朋分外,万鹏飞展现了一个快手及时天空朋分的案例,不管是窗户的遮挡,仍是修建与天空的毗连处,都朋分得十分细致。除各类朋分抠图外,偶然候也需求对画面中的其他语义信息停止阐发,如深度和法线等。

  天生式手艺:以天生鉴别收集(GAN)为代表的天生式手艺是近几年十分炽热的课题。天生式手艺除能够做各类好玩的殊效外(如“童话脸”殊效),其使用已深化到智能内容创作的各个方面。比方传统的染发结果是在头发上叠加一层色彩,结果很假。用天生式手艺染出来的头发,则更像是理想中实践染上去的结果。

  多模态手艺:理想天下中人们感触感染和表达信息大多是多模态的。一个短视频,不但要画面,另有声音、文本信息等,因而UGC智能创作也该当对多模态信息停止结合建模。在智能创作方面,多模态手艺的落地场景有许多,包罗为短视频配乐、配案牍,图文转视频,和笔墨天生画面等。

  以上这些手艺在实践落地中会晤对许多应战,包罗怎样包管算法在各类差别的机型上都能阐扬最好的算法结果且包管运转流利。怎样包管用户在各类利用处景中能包管算法的鲁棒性等。这些都是CV手艺在实践营业落地时必需思索和处理的成绩。

  在演讲的最初,万鹏飞瞻望了短视频UGC智能创作手艺将来开展的五大趋向:“起首是从单模态到多模态,操纵多模态信息停止智能创作;第二,天生模子会愈来愈壮大。天生的内容愈加传神,且天生的历程愈加不变可控;第三,内容形状走向真假交融。假造与理想的鸿沟变得恍惚,混淆理想手艺很有远景;第四,从帮助建造到帮助创意,手艺需求协助人们处理内容创作中的创意瓶颈成绩;最初,计较形式将走向云边端结合计较,壮大的计较才能将为用户解锁更多更智能的创作体验” 。

365体育投注
官方微信

咨询热线:0576-87254168

Copyright © 2002-2020 365体育投注_365体育平台_365体育官网 版权所有 浙ICP备11007676号

推荐到豆瓣 2秒收录外链 3目录 4目录 5MU收录系统 6MU收录系统 7MU收录系统 8MU收录系统 9MU收录系统 11MU收录系统 12MU收录系统 13MU收录系统 14MU收录系统