萧萧头下凹非寺。
量子比特报告|公众号QbitAI
说到短视频效果,你可能第一次想到“抖音(抖音)效果”。
是的,抖音(抖音)效果好像总是很火。就像回到了视频里的“三岁”。
视频源@赖美云
或者一个动作打破次元壁,PDD也皱眉头。
事实上,AI相关的特效技术,国内外也有很多APP在做,但启动手机后圈圈得最多的往往是抖音(抖音)。
同类特殊效果,后面使用的AI技术实际上很接近,但抖音(抖音)效果更具真实感、流畅、爆款也更多。(这是一个伟大的时代。)(莎士比亚。)(另一个时代。)(另一个时代。)
抖音(抖音)特效常青树的秘诀到底是什么?
5米的话,效果可以和虚幻的引擎媲美。
特效的想法不可预测,但渲染效果和计算时间可以磨练到最高值。
其中,渲染效果依赖于计算机视觉(CV)计算机地理(CG)的两种算法改进,而计算时间取决于模型的优化。
对于计算机,CV算法使您能够准确地“理解”照片的内容。小效果的匹配度、实时跟踪的准确性、整体图像的分辨率提高、风格变化等都属于CV算法的范畴。
合成菠萝之类的面部效果,或者高清修复老照片,或者“三岁回归”、“漫画脸”之类的整个画风的转移都属于CV算法的“责任”。
抖音(抖音)CV算法基本上依赖于自己的研究。仅在CVPR 2021的首脑会议上,被选为字节跳动合作的论文就有14篇,涵盖NAS、图像恢复、行为识别等,并在移动目标检测、精细图像识别、视频分类等细分领域的比赛中获得冠军。
此外,CG算法可以让计算机产生假效果,并与CV算法相结合,适合照片或视频。(莎士比亚,CG算法)。
与常规PBR算法一样,仅渲染“基本任务”。电影中常用的粒子系统、抖音(抖音)也用于手机效果,透明材料、布鲁姆效果.不仅是2D贴纸,更接近真实场景。
3D渲染和2D程序火焰效果比较
但是,无论是CV算法还是CG算法,模型越大,渲染效果越好。
电影业界甚至有人说:“如果用专业渲染算法制作1秒的顶级效果,可能需要连续50天进行渲染。”
这种特效模式绝对不能满足用户的实时拍摄要求,更不用说流畅了。
但是火山引擎技术专家杨辉表示,抖音(抖音)5MB的渲染效果可以与虚幻引擎的实现相媲美。
是的。为了确保效果顺利运行,抖音(抖音)效果模型严格限制为5MB,用户可以实时使用。
5MB的所有文件,包括模型、贴图、动画、效果和逻辑触发机制。
压缩到最大计算时间是自研渲染引擎云渲染技术的结合。
在渲染工具中,抖音(抖音)不是使用Unity或虚幻引擎创建特殊效果,而是为短视频和AR开发轻量级渲染引擎。
自研引擎侧重于提高拍摄短视频所需的特效算法,放弃一些游戏专用、短视频不需要的特效,保证渲染效果。
同时,为了在特效中使用更好的渲染算法,抖音(抖音)自行研究云渲染技术,将原本需要用手机硬件计算的特效放到服务器端计算,然后将效果实时发送给用户。(莎士比亚,模板,渲染,渲染,渲染,渲染,渲染,渲染,渲染)
这样本来计算量是GPU级别的渲染效果也可以在手机上实时完成,其效果引人注目。
例如,渲染算法中的粒子系统必须使用GPU计算,才能获得更好的效果(火焰效果)。相比之下,CPU计算更多的粒子系统
为单薄(控雨特效):△2021年的烟花特效vs2018年的控雨特效
但前沿的CV+CG算法和自研工具,只是抖音特效的一部分秘诀。之所以能爆款频出,离不开其成熟的产出流程、覆盖场景全面的工业化体系。
火山引擎:技术井喷
一项技术能否常青,取决于它带来的产品能否批量化生产、适用场景是否全面,对于特效也是如此。抖音特效,已然符合这两个条件:
一方面,据抖音与火山引擎联合发布的《抖音特效数据报告》显示,2021上半年,抖音平台平均每天上线超过100个特效爆款,用户平均每5个投稿里,就有1个使用特效。
这意味着,抖音已经具备了流水化生产特效的能力。同时,这些特效的质量,足以让五分之一的投稿使用它们(抖音的日活用户目前已达到6亿)。
这也让特效设计变得更加容易。在抖音将特效变成一个“创意生产线”之前,特效设计师并不是一个“低门槛”职业。据抖音爆款设计师游洋表示,自己原本是一名影视后期,但却成功当上抖音特效师,身边也有越来越多的同行,正在投身这个职业。
另一方面,抖音特效技术的应用场景,早已不止抖音APP,而已经触及到各行各业。
汽车行业,用特效实现的AR看车;美妆行业,用特效进行AR试妆;传统媒体行业,用数字人技术做出虚拟主持人、虚拟客服……
△AR试妆
可以预见的是,抖音特效已经不再是原本拍摄短视频时所用的特效,而正逐渐成为一种“创意数字内容”。
出圈的抖音特效,成为字节增长秘诀中,又一块不可或缺的重要版图。
现在,字节跳动将它们全部公开了——以火山引擎的方式。
没错,就像字节管理能力的“井喷”产物飞书一样,字节技术能力的井喷,带来了火山引擎。
作为字节内部曾经使用的技术平台,火山引擎不止“存储”着抖音所有特效背后的算法技术能力,也包含特效从制作、质量把关到落地的所有工程技术。
制作上,为了加快生产速度、降低技术门槛,字节将抖音特效背后的算法技术,变成了各种模块化组件。
例如,抖音将常用CV、CG算法做成组件后,设计师只需要拖动读条、或是按下按键,就能在特效中用上这一功能。
而包括从训练到推理在内的算法生产过程,抖音全都采用自研推理框架和训练平台,确保最适合APP的运行速度。
质量审核上,特效设计会进行效果评级,资格足够才能予以上线;同时字节内部也成立了专门的创新小组,保证算法的前沿和创新性,设计出更多满足设计师需求的组件(顶会论文就有不少出自这里)。
落地上,抖音还会考虑用户体验度、不同场景下客户的定制化需求。
例如,抖音采取了如不同手机性能的分级策略、运行速度优化等技术措施,将系统崩溃率降低至10万分之一。
同时,采用资源下发等技术,确保用户能在不更新软件的情况下,使用新特效;面对不同场景时,抖音特效的也能适应不同分辨率、接口类型和机型。
这一切,和前沿的算法技术一起,共同构成了抖音特效成功的秘诀。
“字节技术没有秘密”
7月28日,火山引擎和抖音联合宣布,将上万抖音同款特效开放给客户。
这意味着字节正在将包括算法、道具资源在内的抖音特效的所有优势,全部对外提供技术服务,让更多人享受这一集大成的结果。
目前,像懂球帝、心心APP等一众企业产品,已经在使用火山引擎作为自己的业务增长技术。
未来,火山引擎也计划进一步引入最新的技术如端云协同和多人互动,来增强用户和客户的特效体验。
可以想见,更精致的特效、互动性更强的技术,都将成为抖音未来的发展方向。
同时,特效技术的发展,也会进一步给各行业带来更多的惊喜。
以影视和游戏行业为例,这两项技术能极大地减轻视频后期制作、降低游戏美术成本。例如在某个角色身上加个马赛克、或是做个智能贴图,都不需要再一帧帧去手动调整,算法自动就能完成这些步骤。
这样公开自己所有的增长技术,字节害怕同行的竞争吗?
杨辉表示,不害怕:
随着时间推移,任何一项新技术的准入门槛,都会越来越低。我们能做的,不是去打价格战,而是去拓展、更新技术,保证自身的竞争力。
这个角度来说,字节跳动的增长技术,确实没有秘密。
— 完 —
量子位 QbitAI · 头条号签约
关注我们,第一时间获知前沿科技动态
1.《【抖音三岁照片怎么弄】视频效果太短,为什么抖音火(抖音)?》援引自互联网,旨在传递更多网络信息知识,仅代表作者本人观点,与本网站无关,侵删请联系页脚下方联系方式。
2.《【抖音三岁照片怎么弄】视频效果太短,为什么抖音火(抖音)?》仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证。
3.文章转载时请保留本站内容来源地址,https://www.lu-xu.com/gl/2504301.html