欢迎来到池州三陆五信息科技有限公司- 未来科技

微信
手机版
网站地图

那么多短视频特效,为什么蒂克托克这么火-量子位

2023-04-16 08:57:34 栏目 : 科技资讯大全 围观 : 0次

说起短视频效果,你可能会首先想到“蒂克托克”。

确实,蒂克托克的特殊效果似乎总是疯狂的。用视频“回到3岁”。

△视频提供@赖美云

或者用一个动作打破次元的墙壁,PDD也变得眉目秀丽:

实际上,AI相关的特殊技术在国内外也实施了几个应用程序,但是用智能手机运行的话,最能跳出来的是蒂克托克。

这类特效,背后使用的AI技术其实很接近,但蒂克托克创造出来的特效,描写逼真,动作流畅,爆炸性效果也很多。

蒂克托克活跃的秘诀到底是什么呢

仅5米,无法预测虚拟引擎的效果,但渲染和运算时间可以磨砺到极限。

其中,渲染效果取决于CV(计算机视觉)+CG(计算机图形)两种算法的改进,运算时间取决于模型的优化。

在计算机的情况下,CV算法可以准确地“看到”一张照片的内容。从特殊效果的紧贴度、实时跟踪精度到图像整体分辨率的提高、样式的变化,都属于CV算法的范畴。

像合成大菠萝一样的脸部效果,用高清修复旧照片,“回到3岁”“漫画脸”等,整体画风的转变也是CV算法的“作用”。

蒂克托克的CV算法基本上是自己研究的。仅在CVPR 2021的一次会议上,字节跳动协作就有14篇论文入围,涵盖NAS、图像修复、行为识别等领域。另外,在移动目标检测、细粒度图像识别、视频分类等领域细分的竞赛中获得冠军。

CG算法,电脑发出与真的一模一样的效果,与CV算法组合贴在图像和动画上。

就像常见的PBR算法一样,只需渲染“基本操作”。电影中经常使用的粒子系统,蒂克托克也同样用于手机的效果。其他还有透明素材、布鲁姆效果……不是2D的贴纸,而是接近实际的场景

▲比较三维渲染和二维程序的火焰效果

但是不管是CV算法还是CG算法,模型越大,渲染效果越高。

影像界甚至有人说:“如果用专业的渲染算法实现1秒的最佳效果,就必须持续渲染50天。”。

这样的效果模型绝对不符合用户的实时拍摄需求和平滑度。

然而,根据火山引擎技术专家杨辉,蒂克托克的5MB渲染效果可以达到与虚拟引擎相当的效果。

是的,为了使效果的动作变得顺畅,Ticktock的效果模型被限制为5m字节,用户可以实时使用。

这5兆字节包含模型斯坦普动画有效逻辑触发器所有文件

压缩到极限的运算时间背后有自己的渲染引擎和云渲染技术的组合。

渲染工具为短视频和AR独立开发了轻量级的渲染引擎,而不是Unity和非真实引擎。

自研引擎侧重于增强短视频拍摄所需的特效算法。消除短视频拍摄所需的特殊效果,保证渲染效果。

此外,为了让效果应用更好的渲染算法,蒂克托克独自开发了云渲染技术。本来应该用手机硬件计算的效果,在服务器端计算,并将其效果实时传输给用户。

现在,在GPU级别计算的渲染可以在智能手机上实时进行,效果特别好。

例如,渲染算法中的粒子系统,用GPU计算,首次发挥更好的效果(烟花特效);使用CPU的粒子系统效果比较差

◆2021年的烟花效果vs2018年的雨的效果

但是,最先进的CV+CG算法和独特的研究工具只是蒂克托克技术的一部分。之所以能产生爆炸性的安全打,是因为有成熟的输出流程和覆盖整个现场的工业化系统。

技术能否持久,其带来的产品能否大量生产,适用的方案是否全面,特殊效果也一样。它符合这两个条件

另一方面,据蒂克托克与火山发动机联合发布的《蒂克托克效应数据报告》显示,2021年上半年,蒂克托克平台平均每天爆发100多起效应,每5个用户发帖就产生1起效应。

意味着蒂克托克已经有了流程生产效果的能力。另外,这些效果是投稿的五分之一使用的质量(蒂克托克的日活用户现在达到了6亿人)

特殊效果的设计也变得容易了,直到蒂克托克把特殊效果打造成“创意生产线”,特殊效果设计师并不是“门槛低”的职业。蒂克托尼克设计师游洋说,自己原来是在影像后期,但蒂克托尼克效果成功了据说,周围也有越来越多的同行投身于这个职业。

另一方面,蒂克托克的应用场景,已经不仅仅是蒂克托克应用程序,还涉及到了各种各样的行业。

汽车行业用AR看车在化妆行业用特殊效果进行AR测试使用数字人类技术制作虚拟主持人和虚拟客户

△AR试妆

可以预见的是,蒂克托克正在逐渐成为“创意数字内容”,而不是拍摄短视频的特殊效果。

画圆的蒂克托克,成为了打工的成长秘诀中,另一个不可缺少的重要势力图。

那么,字节跳动把这些全部公开了——用火山引擎方式。

没错,就像字节管理能力的“井喷”产物会飞一样,字节技术能力的井喷,会带来火山引擎。

作为字节内使用的技术平台,火山发动机不仅“存储”了提克托克所有特效背后的算法技术能力,还包括从特效制作到质量、落地的所有工程技术。

在制作中,为了加快生产速度,降低技术门槛,字节将提克托克背后的算法技术变成了各种模块化零件。

例如,如果将提克托克常用的CV和CG算法组件化,设计师只需拖动轻敲或按键,就能将此功能应用到效果中。

从训练到推理的算法生产流程,全部采用自研的推理框架和训练平台,优化应用程序的运行速度。

在质量考核上,特效设计可以进行效果分级,资格证可以充分给予在线;同时,字节内还设有创新团队,以保证算法的最先进性和创新性,并设计了大量组件以满足设计师的需求(大多数顶级会话论文都来自这里)

此外,蒂克托克还考虑用户的体验程度,为每个场景定制客户的需求。

例如,蒂克托克通过按手机性能采用差异化策略或优化动作速度,将系统崩溃率降至十万分之一。

同时,采用资源交付等技术,确保用户不更新软件,可以使用新的特殊效果;面对不同的场景时,提克托克的适应不同的分辨率、接口类型和机型

所有这些都与最先进的算法技术一起成为蒂克托克成功的秘诀。

“打工技术没有秘密。”7月28日,火山引擎和蒂克托克联合宣布,将向客户公开与数万蒂克托克相同的特殊效果。

这意味着byte将包括算法、工具资源在内的提克托克的所有优点,全部对外提供技术服务,让更多的人享受它的集大成。

现在,“知球帝”、“心智APP”等企业产品,作为本公司的事业成长技术使用了“火山引擎”。

未来,我们将进一步引入最新技术,例如云协作和多人交互,以提高用户和客户的效果体验。

更精致的效果、更互动的技术将是蒂克托克未来的方向。

同时,特效技术的发展,也会给各行各业带来更多惊喜。

影视和游戏行业为例,这两种技术可以大大减轻视频后期制作,降低游戏的美术成本。给角色打马赛克,制作智能印章,一张一张地不用手工就能自动完成。

这样公开自己所有的成长技术,打工怕同行竞争吗

杨辉显示,不害怕:

从这个意义上来说,字节跳动的成长技术没有秘密。

展开剩余内容

分享到:

猜你喜欢

  • b2b网站策划书_b2b策划案

    b2b网站策划书_b2b策划案大家好,今天我来给大家讲解一下关于b2b网站策划书的问题。为了让大家更好地理解这个问题,我将相关资料进行了整理,现在就让我们一起来看看吧。文章目录...

    2024-10-22 企业 网站
  • 浙江高端网站_浙江高端网站有哪些

    浙江高端网站_浙江高端网站有哪些好久不见了,今天我想和大家探讨一下关于“浙江高端网站”的话题。如果你对这个领域还不太了解,那么这篇文章就是为你准备的,让我们一看看吧。文章目录列...

    2024-10-22 网站 浙江
  • 做酒的网站_做酒的网站有哪些

    做酒的网站_做酒的网站有哪些希望我能够回答您有关做酒的网站的问题。我将根据我的知识库和研究成果回答您的问题。文章目录列表:1.酒仙网CEO郝鸿峰的电商百亿梦想2.有没有关于介绍...

    2024-10-22 中国 酒类 酒仙 网站
  • 索尼手机软件_索尼手机软件商店

    索尼手机软件_索尼手机软件商店下面,我将为大家展开关于索尼手机软件的讨论,希望我的回答能够解决大家的疑问。现在,让我们开始聊一聊索尼手机软件的问题。文章目录列表:1.索尼的手机...

    2024-10-22 手机 索尼
热门标签