充电计划 | AICon 全球人工智能与机器学习技术

腾讯 

资深研究员

王鑫涛 博士，腾讯资深研究员。博士毕业于香港中文大学信息工程专业，本科毕业于浙江大学。博士毕业后加入腾讯 ARC Lab 做算法研究。主要研究计算机底层视觉，特别是图像、视频的超分辨率与复原增强。曾在 NTIRE、PIRM 等国际超分辨率比赛中多次获得冠军，提出了具有影响力的 ESRGAN、EDVR 等方法。在国际顶会顶刊发表论文十余篇，Google Scholar 引用 3800 余次。目前专注于研究迈向实际应用的图像和视频的复原与增强工作。

演讲：深度学习在内容素材上复原、二次创作的研究应用

在内容创作领域，内容素材是内容创作中的核心，与之相关的技术仍有诸多挑战：如何根据用户的创意从大量素材库中精准挑选出符合预期的片段；挑选出的素材质量不够高清怎么办；素材的内容不完全满足要求，如何快速进行二次编辑等等。

腾讯 ARC Lab 从内容理解、内容增强、内容生成等多个环节对内容创作领域的 AI 技术做了前沿研究，并且把在内容的跨模态检索、复原与增强、二次创作中的研究成果应用到实际的辅助内容创作中去，提高了新内容的创作速度与质量。

本次分享中，我主要选取介绍腾讯 ARC Lab 在内容创作领域中应用 AI 技术的一些最新进展，希望能给对内容创作领域以及相关技术感兴趣的人们带来一些启发。

演讲提纲：

1. AI 内容创作的背景介绍

1. 用户：从一个小想法到饱满的结果

2. 平台：从大量素材库到浓缩的精华

2. 内容的跨模态检索：实体词感知（Entity-aware）的跨模态向量检索

3. 内容素材的复原与增强

1. 基于生成网络先验的人像复原与增强

2. 通用图像 / 视频增强：设计更贴近实际的降质过程

4. 内容的二次创作

1. 人像驱动：视频处理的加速实践

2. 抠图与合成：结合多任务辅助学习

5. 总结

你将获得：

• 最新 AI 技术在内容创作中的背景与概览

• 多项前沿技术，包括多模态检索、复原与增强、生成与编辑技术

• 多模态检索等技术在内容创作中的实际使用

专题演讲嘉宾：魏刚

OPPO

机器学习部预估组负责人

魏刚，OPPO 数智工程事业部机器学习部预估组负责人，主要负责搜推领域统一预估引擎的建设和演进。毕业于哈尔滨工业大学，拥有多年推荐系统及高性能计算架构经验。

演讲：OPPO 推搜广多业务多场景的统一预估引擎实践

在现代互联网行业中，在线预估服务已成为搜索、推荐、广告等领域内不可或缺的组成部分。预估服务是利用模型来进行预测的过程，本质上是一个围绕样本 / 特征 / 模型的计算逻辑集合。如何在 OPPO 这种多业务多场景、大规模流量的情况下，以具有成本效益的方式来进行模型在线实时预估，我们面临以下几个挑战：

模型预估能力是一个通用的需求，灵活满足业务诉求的同时如何兼顾整体效率，避免重复开发？如何应对超多候选、超多特征、超大模型所带来的巨大算力成本消耗？如何解决线上线下特征样本一致性的担忧？如何提供一种灵活的架构可以对粗排精排场景采取针对性的适配优化？针对这些问题，本次演讲我将从实际工作角度出发，阐述相关的技术方案和选型，分享我们在建设推搜广全场景统一预估引擎的具体实践与经验。

演讲提纲

1. 统一的特征计算框架

1. 可扩展算子模式

2. 无冗余分离计算

2. 统一的模型推理管理

1. 统一模型推理接口

2. 支持推理分离架构

3. 预估多阶段加速机制

1. 多核加速

2. 多机加速

4. 在线离线一致性方案

1. 计算逻辑约束

2. 回调数据约束

5. 粗排针对性优化分享

1. 协议优化

2. 流程优化

3. 算力优化

听众收益

• 了解应对多业务多场景的模型预估服务的参考设计

• 了解统一预估引擎落地的一些技术挑战和解决方案

• 了解统一预估引擎对粗排所做的针对性优化及思考