阿里-李晓波-深度学习在端侧AI的发展之路.pdf

1、主办： 深度学习在端侧AI的发展之路 篱悠 手淘 资深算法专家 主办： 篱悠 资深算法专家 “ 李晓波，花名篱悠，2009年北硕毕业加阿巴巴，先后在 B2B、阿云、淘等BU任职。前在淘负责多媒体算法部， 持淘宝直播和短视频等业务。 ” 讲师简介 主办： 随着技术的迭代更新，新的媒体形式不断推陈出新。短视频/直播、VR、AR、 3D、MR等新兴的媒体技术不断出新，方新未艾。那么做为电商购物场景的手 淘，在业务发展的过程中又是如何利用这些新兴技术来为用户带来更好的购物 体验呢？ 主办： 深度学习在端侧AI的发展之路-新形势、新挑战 端侧编解码 端侧视觉库PixelAI 多模态视频内容理解算法平台(

2、CIPP) 成本 效率体验 ? 新技术：4G普及 新时代：无线时代 新机遇：视频点播、短视频、直播、视频会议 新挑战： 隐私保护与数据安全日益重要 海量视频信息过载 视频流量成为吞金巨兽 视频信息单向流动转向双向实时互动 主办： 深度学习在端侧AI的发展之路-算法链路 分类 语义描述 情感 视频图谱 视频智能 分发 视频链路视频链路 视频内容视频内容 感知感知 视频智能 生产 检索 推荐 智能场景滤镜 图像增强 成像质量评价体系 视频编解码 人脸 分割 姿态动作 SLAM&AR 视频内容 理解 用户画像用户画像 用户关系 用户行为 用户用户 性别 年龄 偏好 观看 喜欢 收藏 分享 同好关系

3、关注关系 好友关系 主办： 深度学习在端侧AI的发展之路-PixelAI PixelAI 小模型设计思路 应用多任务学习框架，复用浅层网络，减少重复计算 与工程框架结合做好模型压缩与硬件加速 检测与跟踪算法相结合，上层业务做好算法调用管线的合理编排 小模型 设计 AutoML 模型搜索 局部 最优 模型 主办： 深度学习在端侧AI的发展之路-PixelAI发展历程 智能化 互动化 主办： 深度学习在端侧AI的发展之路-PixelAI整体架构 人脸人脸106点关键点点关键点 人脸人脸240点关键点点关键点 眼瞳眼瞳 人脸姿态人脸姿态 人脸位置人脸位置 点头点头 摇头摇头 甩透甩透 张嘴张嘴 眨眼眨眼 6种动作种动作 高兴高兴 悲伤悲伤 恐惧恐惧 吃惊吃惊 平静平静 7种表情种表情 年龄年龄 别性别性 颜值颜值 妆饰妆饰 遮挡遮挡 ok、点赞、爱心等、点赞、爱心等 20种静态手