作者：李泽南
在Tik Tok，平均五分之一的视频作品使用特效，这已经成为一种流行的表达方式。
随着AI算法的进步，手机短视频app上的特效越来越花哨，各种变脸美颜应用层出不穷。去年6月，Tik Tok推出了“变身漫画”的特效，吸引了Tik Tok各界明星和广大用户前来体验，纷纷展示自己的漫画形象。漫画成为年度爆款，近1700万用户尝试使用，视频播放数十亿次。
在Tik Tok的App上，用户只要一挥手，就可以生成自己的实时卡通形象，五官、发型、衣服都经过了精准的变换。
当特效打开时，欧阳娜娜和她的猫就变成了高萌的卡通形象。
一年多过去了，Tik Tok推出了哪些有趣的特效？7月28日，Tik Tok和火山引擎联合举办了“智能特效”技术开放日，Tik Tok的工程师给我们做了介绍。除了面向普通用户的工具，字节跳动还向其他厂商开放了最新的AI技术，并鼓励CG设计师加入制作原创互动内容的行列。
活动中，抖音发布了第一部《抖音特效数据报告》，首次向大众展示了其在特效应用领域的技术进步和落地。2021年上半年，Tik Tok平台平均每天推出100多个新特效，平均每五个投稿中就有一个使用了特效。
这些特效是由火山引擎、Tik Tok特效团队和活跃在Tik Tok的无数特效设计师创造的。
Tik Tok特效的蜕变史
给视频加特效不容易。2016年，Tik Tok主要依靠平面设计和第三方技术实现特效。到2017年，字节跳动已经成立了一个特效团队，并开始开发自己的技术。Tik Tok设计中心负责人王云辉表示：“我们之所以做出这个决定，是因为我们发现特效道具贴纸可以鼓励用户做出贡献。”。那一年，Tik Tok推出爆款产品狗头贴。
很快，Tik Tok特效团队使用的技术从传统CG升级到深度学习。2018年，Tik Tok推出的特殊控雨效果成为爆款。最近一段时间，这样的爆款越来越多，特效团队已经发展到几百人。
正如人们所看到的，最近在Tik Tok流行的卡通脸效果。很多明星自发使用卡通人脸，用户生成的卡通人脸照片甚至成为他们的社交账号头像。
该产品结合了人工智能领域流行的GAN技术。“我们第一次接触甘是在一次内部技术分享会上，”王云辉说。“这项技术带来的创意非常好，但在实践中遇到了一些困难。——最初的效果远远达不到实用的程度，如果和艺术形式相比应该是抽象的。为了最终在Tik Tok上线，整个团队最终决定走向漫画风格。」
Tik Tok的特效团队几乎筛选了所有的漫画风格，最终确立的风格包含了很多元素，包括日漫、郭曼、寒曼。它的细节丰富，颜色通透，最重要的是它的图像更阳光。
选择风格后，工程师们引入算法模型，持续优化模型两个多月，更新迭代超过1000个版本。最忙的时候，几百块显卡同时使用，同时运行模型。
最后，2020年6月推出的卡通人脸特效在短短三天内获得了数千万的贡献，成为Tik Tok特效的里程碑。
据统计，仅2021年上半年，就有超过8000万用户首次在Tik Tok贡献中使用特效。
现在，Tik Tok推出的特效涵盖了装饰、互动、风格和场景四大类，并仍在帮助非物质文化遗产的传播，如戏曲头饰、京剧、越剧、川剧等特效。在Xi安钟楼、重庆洪亚东、北京三里屯等地标，人们也可以打开手机摄像头，观看AR的装饰效果。
在Tik Tok，做你自己的特效
做一个视频特效工具，需要实现对目标点的检测和跟踪，以及对图像的理解，这就需要使用最新的计算机视觉技术。得益于最近深度学习的发展，我们现在可以在手机上实现实时的真实世界场景物体识别。再加上物体分割和渲染效果，利用CG技术在真实场景上叠加虚拟图像，可以实现各种有趣的效果。
“在影视等行业，近年来AI技术的提升让特效越来越真实，但同时也增加了成本。在好莱坞视觉大片的制作中，特效的成本可能占到60%。如果只用一台机器渲染一秒钟的特效，可能需要50天。火山发动机特效技术
专家杨辉说道。
在抖音上这么做显然不行，工程师需要在尽可能使用先进技术的同时降低应用的门槛，让更多人能够参与到创作的行列中来。
背靠业内最多的用户，抖音的特效功能通过多轮产品迭代，拥有完善的组件模块化、适配、资源下发能力，大幅度提升了应用便利性。抖音特效的稳定性也很高，在接口层面的崩溃率不到 10 万分之一。
抖音还花费近两年时间从零到一打造了自己的渲染引擎，相比人们熟知的 Unity 和 Unreal，抖音引擎专门针对短视频 AR 特效，体积更小，平台适用范围更广，同时也具备高效的渲染效果。
迄今为止，抖音特效开放平台已经包含了 100 余种算法，覆盖多种场景，支持了字节的 40 多项业务。
字节跳动研发的高性能机器学习训练平台、端上压缩算法和异构推理引擎，未来都会通过火山引擎面向企业平台进行开放。在活动中，字节跳动宣布面向企业客户开放上万款抖音同款特效，包括猴哥、漫画惊讶脸等热门道具。现在，使用火山引擎的特效工具套件，一名设计师仅需五天就可生产出自己的 3D 特效。
在火山引擎的特效服务体系中，会有字节跳动的一线专家协助客户打造定制化的解决方案，已有的特效道具资源也被开放，包括拍摄资源、编辑资源和 MV 模板资源等。
除了短视频，视觉特效的应用场景还有很多。在火山引擎中，AR 看车、AR 试妆和虚拟形象（数字人）等技术已经落地。未来还有可能出现互动广告等全新交互形式，让人们获得更好的购物体验。
「随着 5G 时代到来，网络延迟降低，带宽增大，很多计算将不会在本地完成，我们可以把 CV 算法做得更精准，CG 效果更加酷炫。会出现端云协同，多人互动的新类型特效，未来也有可能会出现手机之外的新移动端入口，」杨辉说道。
