{ "source_file": "0930", "source_platform": "知乎专栏", "author": "王剑锋", "title_listed": "人脸检测江湖的那些事儿——从旷视说起", "keywords": "人脸检测,旷视,尺度遮挡", "domain": "图像处理", "content_type": "深度技术解析", "is_paid_flag": "否", "url": "https://zhuanlan.zhihu.com/p/56619497", "publish_date": "2019", "corpus_stage": "应用", "notes": "人脸检测核心问题与工业实践", "id": "60c477d6e9b2", "collected_at": "2026-10-02T18:44:46", "title": "人脸检测江湖的那些事儿——从旷视说起 - 知乎", "body_markdown": "[![](https://zhuanlan.zhihu.com/p/56619497)](javascript:void\\(0\\))\n![ZhiHu logo](../images/body-e1fa91dbdb48b8055184.png)\n[](https://www.zhihu.com)\n[关注](https://www.zhihu.com/signin?next=%2Ffollow)[推荐](https://www.zhihu.com/signin?next=%2F)[热榜](https://www.zhihu.com/signin?next=%2Fhot)[专栏](https://www.zhihu.com/signin?next=%2Fcolumn-square)[圈子](https://www.zhihu.com/signin?next=%2Fring-feeds)[AI WorksBeta ](https://www.zhihu.com/project-square)[故事](https://www.zhihu.com/fiore/h5/vip-web)\n​\n[直答](https://zhida.zhihu.com/)\n切换模式\n登录/注册\n人脸检测江湖的那些事儿——从旷视说起\n首发于[R4D](https://www.zhihu.com/column/c_1065911842173468672)\n切换模式\n![人脸检测江湖的那些事儿——从旷视说起](../images/000.img)\n# 人脸检测江湖的那些事儿——从旷视说起\n[![王剑锋](../images/033.jpg)](https://www.zhihu.com/people/wjfwzzc)\n[王剑锋](https://www.zhihu.com/people/wjfwzzc)\n[​![](../images/body-ddf414f04793a667b2c1.png)](https://www.zhihu.com/question/48510028)\n北京航空航天大学 软件工程硕士\n知乎日报收录\n[收录于 · BaseDetection](https://www.zhihu.com/column/r-detection)\n416 人赞同了该文章\n## 题外话\n这是 [Face++ Detection Team](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Face%2B%2B+Detection+Team&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJGYWNlKysgRGV0ZWN0aW9uIFRlYW0iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.-_3INI-t7wr0Gx0r3MTpn2ic_UPxYVFHVwkZ892gwso&zhida_source=entity)（R4D）第 3 篇知乎专栏。如果说该专栏的定位是双向交流，一个比较贴切的词可能是「窗口」：一方面，我们希望从论文的生产、研究员的成长乃至公司的文化氛围等多方面被了解，被认识，被熟悉，希望携手共同见证最优检测算法的研究、创新与落地，突破认知边界，实现[降本增效](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%99%8D%E6%9C%AC%E5%A2%9E%E6%95%88&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpmY3mnKzlop7mlYgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.wYjahAXPp6meKklVapfN29jZOIbfe48VCiKL_vHbuW0&zhida_source=entity)，为客户和社会创造最大价值；另一方面，我们也希望了解读者的想法，增加与读者的互动，形成双向反馈的正向沟通机制。R4D 后续也会组织线下活动，加大加深彼此交流。如果你感兴趣，或者想加入，欢迎联系 Face++ Detection Team 负责人俞刚 （yugang@megvii.com）。\n \n\n本次分享的主题是人脸检测（Face Detection），分享者是旷视科技王剑锋，来自 Face++ Detection 组。通过这篇文章，可以一窥旷视近两年在该方向的工作与思考，并希望为计算机视觉社区带来启发，进一步推动[人脸检测技术](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E6%A3%80%E6%B5%8B%E6%8A%80%E6%9C%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjmo4DmtYvmioDmnK8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.FF052_HdzLZMMbZMG9RjTPgjF67rL77wv9Es8GRlDOs&zhida_source=entity)的研究与落地。人脸检测是人脸识别的第一站，旷视的努力主要体现在紧紧围绕人脸检测领域顽固而核心的问题展开，攻坚克难，功夫花在刀刃上，比如人脸尺度的变动及遮挡等，实现速度与精度的双重涨点。\n## 前言\n人脸检测的目的是，给定任意图像，返回其中每张人脸的边界框（Bounding Box）坐标，实际操作上它对[通用物体检测](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%80%9A%E7%94%A8%E7%89%A9%E4%BD%93%E6%A3%80%E6%B5%8B&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpgJrnlKjniankvZPmo4DmtYsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.BPDdqHcvAuc3PzrV2RzgJu1v7kQIymOG7KpFQ9JrVv0&zhida_source=entity)（General Object Detection）有较多借鉴，是通用物体检测技术的聚焦和细分。由于人脸检测是所有人脸分析算法的前置任务，诸如[人脸对齐](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E5%AF%B9%E9%BD%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjlr7npvZAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.1G_V35xZU8TkYDfgdCLRXbet2sNmuVTZ1vZIKHb6uKQ&zhida_source=entity)、人脸建模、人脸识别、人脸验证/认证、头部姿态跟踪、面部表情跟踪/识别、性别/年龄识别等等技术皆以人脸检测为先导，它的好坏直接影响着[人脸分析](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E4%BA%BA%E8%84%B8%E5%88%86%E6%9E%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjliIbmnpAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.U4boJSFwset8M7Vry8Cx3fPmVAggOnnsCyTmD6Ss6uY&zhida_source=entity)的技术走向和落地，因而在学术界和工业界引起广泛的重视和投入。\n如今，随着深度学习普及，人脸检测与通用物体检测已相差无几，作为二分类任务，其难度也低于通用物体检测，因此现阶段人脸检测研究更需走差异化路线，从实际应用中汲取营养。\n尺度变化是人脸检测不同于通用物体检测的一大问题。通用物体的尺度变化范围一般在十几倍之内；与之相比，人脸的尺度变化范围由于摄像头不断升级，在 4K 甚至更高分辨率场景中可达数十倍甚至上百倍。面对这一问题，[1, 2] 给出的答案是寻找最优尺度多次采样原图，其本质是优化[图像金字塔](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%9B%BE%E5%83%8F%E9%87%91%E5%AD%97%E5%A1%94&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlm77lg4_ph5HlrZfloZQiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.OkB7jdjuR9-PqBpITvF7QmGSmzqHFQvxSEYbgLEeQQE&zhida_source=entity)（Image [Pyramid](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Pyramid&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQeXJhbWlkIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.MpBrZ_GipYiKcHqPVYlIUka0Rq1IqXyO_4n15cYwxWQ&zhida_source=entity)）；[3, 4] 则利用不同深度的特征图适应不同尺度的人脸，其本质是优化特征金子塔（Feature Pyramid）；而旷视自主研创的 SFace 方法试着从完全不同的角度切入这一问题。这是本文第一部分。\n和尺度变化一样，遮挡也是人脸检测面临的常见挑战之一。实际场景中的眼镜、口罩、衣帽、头盔、首饰以及肢体等皆会遮挡人脸，拉低人脸检测的精度。对此，[5, 6] 尝试提升[神经网络](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnpZ7nu4_nvZHnu5wiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.VvWqHXoa7n5N1ulWTec552nVF3h7ZwGQP06WhXFdAmw&zhida_source=entity)适应遮挡情况的能力，[7] 则将问题转化为遮挡与非遮挡人脸在[向量空间](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%90%91%E9%87%8F%E7%A9%BA%E9%97%B4&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlkJHph4_nqbrpl7QiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.3FjqLD1inU_SdQH-g8mShwzdrVYmuY_JvbF5p5JHiJw&zhida_source=entity)中的距离这一度量学习问题。此外，很多深度学习方法训练时辅用的[数据增强技术](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E6%95%B0%E6%8D%AE%E5%A2%9E%E5%BC%BA%E6%8A%80%E6%9C%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmlbDmja7lop7lvLrmioDmnK8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.SpFYRLbuOfgRu4OvkiU88g7WAGe05UYFgbZwIBYTzgg&zhida_source=entity)也在一定程度上提高了网络对遮挡情形的[鲁棒性](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%B2%81%E6%A3%92%E6%80%A7&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpsoHmo5LmgKciLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.u3kkDyoLPKakrsUArsSlJfve6yWAKuKh700Ar3mSzGE&zhida_source=entity)；而旷视原创的全新算法 FAN 也是针对人脸遮挡问题而提出。这是本文第二部分。\n如上所述，人脸检测是人脸关键点、[人脸识别](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=3&q=%E4%BA%BA%E8%84%B8%E8%AF%86%E5%88%AB&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjor4bliKsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MywiemRfdG9rZW4iOm51bGx9.r_W4LJwxviInXnVBjjY1dKulv1twLhsO7O9okZSxL_o&zhida_source=entity)等的前置任务，人脸检测框质量直接影响着整条 Pipeline 的表现，常见人脸检测数据集的评测指标对边界框质量缺乏关注；2018 WIDER Challenge Face Detection 首次采用相同于 MS COCO 的评测方式，表明这一状况已有大幅改善；本文第三部分则将介绍这次比赛夺冠的一些诀窍。\n## 尺度变化： SFace\n[](https://link.zhihu.com/?target=https%3A//arxiv.org/abs/1804.06559)\n目前的人脸检测方法仍无法很好地应对大范围尺度变化，基于图像金字塔的方法理论上可覆盖所有尺度，但必须多次采样原图，导致大量重复计算；而基于[特征金字塔](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%89%B9%E5%BE%81%E9%87%91%E5%AD%97%E5%A1%94&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHph5HlrZfloZQiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.JP44e98lHNkxxClDpGYeP5A1BxU_PJvmJx8E9TcQQpQ&zhida_source=entity)的方法，[特征层数](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%89%B9%E5%BE%81%E5%B1%82%E6%95%B0&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHlsYLmlbAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.uF8sZgRn8LTAMX1n1ekO-rjapHS59pxWSXJTcKCCLIs&zhida_source=entity)不宜加过多，从而限制了模型处理尺度范围的上限。是否存在一种方法，图像只通过模型一次，同时又覆盖到足够大的尺度范围呢？\n目前，单步检测方法大致可分为两类：1）Anchor-based方法，如 SSD[8]、RetinaNet[9] 等；2）Anchor-free方法，如 DenseBox[10]、UnitBox[11] 等。Anchor-based 方法处理的尺度范围虽小，但更精准；Anchor-free 方法覆盖的尺度范围较大，但检测微小尺度的能力低下。一个非常自然的想法就是，两种方法可以融合进一个模型吗？理想很丰满，现实很骨感，Anchor-based 和 Anchor-free 方法的输出在定位方式和置信度得分方面差异显著，直接合并两个输出困难很大，具体原因如下：\n其一，对于 Anchor-based 方法，ground truth IoU ≥ 0.5 的锚点将被视为正训练样本。可以发现，正负样本的定义与边界框回归结果无关，这就导致 Anchor-based 分支每个锚点输出的分类置信度实质上表示的是「锚点框住的区域是人脸」的置信度，而不是「网络预测的回归框内是人脸」的置信度。故而分类置信度很难评估网络实际的定位精度。对于在业务层将 Classfication Subnet 和 Regression Subnet 分开的网络，情况将变得更为严重。\n其二，对于 Anchor-free 方法，网络训练方式类似于目标分割任务。输出的特征图以边界框中心为圆心，半径与边界框尺度成比例的椭圆区域被定义为正样本区域，特征图其它位置（像素）被视为背景。通过这种方式，Anchor-free 分支的分类[置信度](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=6&q=%E7%BD%AE%E4%BF%A1%E5%BA%A6&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnva7kv6HluqYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NiwiemRfdG9rZW4iOm51bGx9.uJWwHua0KwL7uu2igb96LQJ6PLPLQZRKIZ5Mo66F6rw&zhida_source=entity)得分实质为「该像素落在人脸上」的置信度，而且该分类置信度与定位的准确度的关联同样很弱。\n总而言之，Anchor-based 方法和 Anchor-free 方法的分类置信度都与回归定位精度关联甚微，其置信度得分也分别代表着不同的含义。因此通过分类结果直接合并两个分支输出的边界框是不合理的，并且可能导致[检测性能](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E6%A3%80%E6%B5%8B%E6%80%A7%E8%83%BD&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmo4DmtYvmgKfog70iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.eJq28wlO8kvmhZhWN7Kg43CMVdpPpFEgnkrN2N_ctZw&zhida_source=entity)的急剧下降。\n因此，可以将回归的边界框和 ground truth 边界框之间的 IoU 当作 Classfication Subnet 的ground truth，这正是 SFace 所做的事情。\n![](../images/004.jpg)\nSFace 网络结构\n具体而言，SFace 设计了Anchor-based 和 Anchor-free 两个分支，前者基于 RetinaNet，后者基于 UnitBox；两个分支都在训练第一步通过 Regression Subnet 生成边界框；接着计算[边界框](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=10&q=%E8%BE%B9%E7%95%8C%E6%A1%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLovrnnlYzmoYYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MTAsInpkX3Rva2VuIjpudWxsfQ.4tmqwbzVVxPjCf_c27VuYMu1KRKeWDF-NUs3dGpmxXs&zhida_source=entity)和 ground truth 边界框之间的 IoU；（Anchor-based 分支的）锚点和（Anchor-free 分支的）像素中 IoU ≥ 0.5 的结果将视为 Classfication Subnet 的正样本，其它则视为负样本，Classfication Loss 采用 Focal Loss。我们还尝试过直接回归 IoU，然而实验结果表明，相较于采用 Sigmoid Cross Entropy 或 Focal Loss，直接回归 IoU 所得结果方差较大，实际效果欠佳。\nAnchor-based 分支和 Anchor-free 分支都使用 IoU Loss 做为 Regression Loss。这种调整有助于统一两个分支的输出方式，优化组合结果。通过以上修正，两个分支的[分类子网络](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%88%86%E7%B1%BB%E5%AD%90%E7%BD%91%E7%BB%9C&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLliIbnsbvlrZDnvZHnu5wiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.GM3sZzcwmsCw3-medpSM7YegjER72kAdOqrCCvn7Qfo&zhida_source=entity)的实质含义得到统一，分类置信度的分布得到一定程度的弥合，从而 SFace 可有效融合两个分支的结果。\n此外，SFace 必须运行很快才有实际意义，否则大可以选择做图像金字塔。为此，基于 Xception，SFace 采用了一个 FLOPs 仅有 39M 的 Backbone，称之为 Xception-39M，每个 Block 包括 3 个 SeparableConv 的 Residual Block。Xception-39M 运算量非常小，感受野却高达 1600+，十分适合处理更高分辨率图像。\n![](../images/005.jpg)\nXception-39M 网络结构\n![](../images/006.jpg)\nXception-39M 单一 Block 结构\nSFace Backbone 理论计算量只有下表中部分方法的 1/200（这些方法多采用 VGG-16、[ResNet-101](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ResNet-101&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJSZXNOZXQtMTAxIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.-PR5Rfr2bj0PnyCTnZsIHIcxxfjTRwML2R3HVfpt9LI&zhida_source=entity) 等作为 Backbone），且都采用多尺度测试；而 SFace 测试全部在单一尺度下进行。事实上，SFace 的设计初衷正是只在一个尺度下测试即可覆盖更大范围的尺度变化。\n![](../images/007.jpg)\nWIDER Face 验证集和测试集的 PR 曲线\n消融实验证明直接融合 Anchor-based 与 Anchor-free 方法不可行，而 SFace 提出的融合方法是有效的。Anchor-free [分支覆盖](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%88%86%E6%94%AF%E8%A6%86%E7%9B%96&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLliIbmlK_opobnm5YiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Fcgx5pg8Oi8SnSkrGlygpz84ch6J-RgO6o0ELPdHBJg&zhida_source=entity)了绝大多数尺度（easy set 和 medium set），而 Anchor-based 分支提升了微小人脸（hard set）的检测能力。\n![](../images/008.jpg)\nWIDER Face 验证集的消融实验\n4K 分辨率下，SFace 运行速度上接近实时，据知这是首个在 4K 分辨率下 WIDER Face hard AP 高于 75 的实时人脸检测方法。\n![](../images/009.png)\nSFace 在不同分辨率下的运行时间（单张 NVIDIA Titan Xp）\n## 遮挡：FAN\n[](https://link.zhihu.com/?target=https%3A//arxiv.org/abs/1711.07246)\n我们可以从另一个角度考虑遮挡问题。一个物体在清晰可见、无遮挡之时，其特征图对应区域的响应值较高；如果物体有（部分）遮挡，理想情况应是只有遮挡区域响应值下降，其余部分不受影响；但实际情况却是整个物体所在区域的响应值都会降低，进而导致模型 Recall 下降。\n解决这个问题大概有两种思路：1）尽可能保持住未遮挡区域的响应值，2）把无遮挡区域降低的响应值弥补回来；前者较难，后者则相对容易。一个简单的做法是让检测器学习一个 Spatial-wise Attention，它应在无遮挡区域有更高的响应，然后借助它以某种方式增强原始的特征图。\n那么，如何设计这个 Spatial-wise Attention。最简单考虑，它应当是一个 Segmentation Mask 或者 Saliency Map。基于 RetinaNet，FAN 选择增加一个 Segmentation 分支，对于学到的 Score Map，做一个 exp 把取值范围从 [0, 1] 放缩到[1, e]，然后乘以原有的特征图。为简单起见，Segmentation 分支只是叠加 2 个 Conv3x3，Loss 采用 Sigmoid Cross Entropy。\n![](../images/010.jpg)\nFAN 的分层 Attention\n这里将面对的一个问题是，Segmentation 分支的 [ground truth](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=5&q=ground+truth&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJncm91bmQgdHJ1dGgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NSwiemRfdG9rZW4iOm51bGx9.ctvwtUeNvWlNnTQIj88xcj6tU0uZP2CjhbS32p8ntq8&zhida_source=entity) 是什么，毕竟不存在精细的 Pixel-level 标注。由于人脸图像近似椭圆，一个[先验信息](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%85%88%E9%AA%8C%E4%BF%A1%E6%81%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlhYjpqozkv6Hmga8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Vym0LUWJr7oQyv7iLmTD8RunQsiA7cX4kWGwgbKfQGU&zhida_source=entity)是边界框区域内几乎被人脸填满，背景区域很小；常见的遮挡也不会改变「人脸占据边界框绝大部分区域」这一先验。基于这一先验可以直接输出一个以边界框矩形区域为正样本、其余区域为负样本的 Mask，并将其视为一个「有 Noise 的 Segmentation Label」作为实际网络的 ground truth。我们也尝试根据该矩形截取一个椭圆作为 Mask，但实验结果表明基本没有区别。\n这样的 ground truth 真能达到效果吗？通过可视化已学到的 Attention Map，发现它确实可以规避开部分遮挡区域，比如一个人拿着话筒讲话，Attention Map 会高亮人脸区域，绕开话筒区域。我们相信，如果采用更复杂的手段去清洗 Segmentation Label，实际效果将有更多提高。\n![](../images/011.jpg)\nFAN 网络结构\nFAN 在 WIDER Face 上曾经保持了半年的 state-of-the-arts。由于仅仅验证方法的可行性，FAN 没有叠加任何 trick，只在原始的 RetinaNet 上调整锚点框，增加我们的 Spatial Attention，因此 FAN 还有很大的上升空间。\n![](../images/012.jpg)\nWIDER Face 验证集的 PR 曲线\n## 定位精度：2018 WIDER Challenge Face Detection\n第三部分介绍一下旷视科技夺魁 [WIDER Face and Pedestrian Challenge 2018](https://link.zhihu.com/?target=http%3A//wider-challenge.org/) 上的解决方案。2018 WIDER Challenge 有 3 个 track，旷视参战了其中的 Face Detection。更多信息请参见：[ECCV 2018 | 旷视科技夺获人工智能顶赛Wider Challenge人脸检测冠军](https://link.zhihu.com/?target=https%3A//mp.weixin.qq.com/s%3Fsrc%3D11%26timestamp%3D1550658769%26ver%3D1440%26signature%3DbCoNvoBIvCz%2ALUP7KMaWSPfJT1D4hvF2L4sgWPnW%2Av4vbFMIGW5CqBsAu5NcGyeQkIWzicMMi2P3y-a2%2AbJDwUM3Xo90m-mnXiHfn23zFvA6CDGGNkhdQAD7vQ3CFB3y%26new%3D1)。\n![](../images/013.jpg)\n2018 WIDER Challenge Face Detection 排名\nFace Detection 使用 WIDER Face 数据集原始图像，但是 Label 做了一定修正。据我们统计，Label 数量稍多于原数据集，导致在不对模型做任何更改的情况下，使用新 Label 也会比原 Label 涨点（更新：目前WIDER Face官网上已经用WIDER Challenge Label覆盖原Label，不再存在此问题）。此外，WIDER Challenge [数据集](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=4&q=%E6%95%B0%E6%8D%AE%E9%9B%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmlbDmja7pm4YiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NCwiemRfdG9rZW4iOm51bGx9.YZ4usj5Sm0Qec7vN6PteTFJzwKXoHc3wSfTj44oXw8M&zhida_source=entity)不同于 WIDER Face 数据集的是，使用了相同于 MS COCO 的Metrics，这意味着对模型的回归能力提出了更高的要求。\n旷视夺冠的方法仍然基于 RetinaNet。通过对比常见 Backbone，我们给出了以下表格的结果。可以发现，更强的 Backbone 并不意味着更好的 Detection 能力。一些 Backbone 分类能力更强，但是提供的特征或者分层特征并不够好；[感受野](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E6%84%9F%E5%8F%97%E9%87%8E&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmhJ_lj5fph44iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.fYfUmv2MoWbFuFwU42IEgqIDW3SNxXe7qJDs3S8XalU&zhida_source=entity)等对 Detection 至关重要的因素也不合适；对于二分类问题而言也存在过拟合现象。由于实验周期等原因，我们最后简单选择了 [ResNet-50](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ResNet-50&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJSZXNOZXQtNTAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Wq25FFlZVqiBpnen6vdS_S5tJ8NSz05uQeeSVRkME9k&zhida_source=entity) 和 [DenseNet-121](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=DenseNet-121&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJEZW5zZU5ldC0xMjEiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.lOClyRHuqjvSRQjRc3BRVeBhU-dVaC-YLbD1_ykDhAM&zhida_source=entity) 继续后面的实验。需要声明的是，它们在很多情况下都不是最优 Backbone，我们有必要思考何种 Backbone 提取的特征最适合做检测。\n![](../images/014.jpg)\n不同 Backbone 的比较\n我们在 Backbone 上应用了 GAP trick，这在上篇知乎专栏（[ycszen：语义分割江湖的那些事儿——从旷视说起](https://zhuanlan.zhihu.com/p/55263898)）有所介绍。该 trick 同样适用于 Detection。我们还使用了 Deformable Conv，但其贡献主要是扩大 ResNet 原本不高的感受野。\n对于 Head 部分，我们首先将 Smooth L1 Loss 换成 IoU Loss，这是为照顾数据中占比较多的小脸，但实际分析一下可以发现，在[锚点框](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=3&q=%E9%94%9A%E7%82%B9%E6%A1%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLplJrngrnmoYYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MywiemRfdG9rZW4iOm51bGx9.xeUETNe3tK-N4JNMEay5NxKYUWOpJvUE7XLUUdyb8Ao&zhida_source=entity)合适的情况下，IoU Loss 的提升会很微小。我们对 Head 的主要改动是做一个简单的 Cascade。Cascade R-CNN[12] 是最早通过做 Cascade 提升模型 Regression 能力的方法，我们希望将其移植到单步检测器上。\n![](../images/015.jpg)\nCascade R-CNN\n可以发现，具体做法部分借鉴了 SFace，即把前一个 Stage 的预训练边界框与 ground truth 边界框之间的 IoU 作为下一个 Stage 的 Classification Label；随着 IoU 逐渐提升，每个 Stage 的 IoU threshold 也逐渐增大，这与 Cascade R-CNN 很类似。\n![](../images/016.jpg)\n旷视使用的单步检测 Cascade 方案\n这个 Cascade 方案不难想到，也简单易行，但是的确涨点，Inference 时也只需保留最后一个 Stage，不会增加 Inference 成本；这个方案也有自己的问题，最大的是每个 Stage 在共用同一个[特征图](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=7&q=%E7%89%B9%E5%BE%81%E5%9B%BE&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHlm74iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NywiemRfdG9rZW4iOm51bGx9.l0L_nvn3hw-adBeemPlRMKpFxxxuHmnzmTbWt2NCYzg&zhida_source=entity)，也共用不变的 anchor，对此已有一些相关论文提出改进，如[13, 14, 15]。\n![](../images/017.jpg)\n单步检测 Cascade 的对比实验\n此外，我们还在 Data Augmentation、Ensemble 等方面做了改进，由于比较 trivial，这里不再赘述。我们曾在 ECCV 2018 Workshop 展示过该方案，更多内容请查阅 slides：\n[](https://link.zhihu.com/?target=https%3A//megvii-my.sharepoint.cn/%3Ap%3A/g/personal/wangjianfeng_megvii_com/ESiVDS9fO9RClWSAw3CZArYBRJLSakW4UXXCwBTRQ2lRug%3Fe%3DYiLIxG)\n作者简介\n[王剑锋](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E7%8E%8B%E5%89%91%E9%94%8B&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnjovliZHplIsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.vBAOtAJHF0JfLrjNQ8kcFw0w2zh559KPmVhAT4qTqfQ&zhida_source=entity)，北京航空航天大学软件学院硕士，旷视科技研究院[算法研究员](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%AE%97%E6%B3%95%E7%A0%94%E7%A9%B6%E5%91%98&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnrpfms5XnoJTnqbblkZgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Ik0drUBvTFOhGTRGDfXXCJ4LNMoaM9a9Fxm5tI3ANpg&zhida_source=entity)，研究方向人脸检测、通用物体检测等；[人脸检测算法](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E6%A3%80%E6%B5%8B%E7%AE%97%E6%B3%95&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjmo4DmtYvnrpfms5UiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.9mlAWDCX3Y_jrUVrlwEn0i2GgrrcFBTJiKoS3WgVwWQ&zhida_source=entity) SFace 和 FAN 一作；2018 年参加计算机视觉顶会 ECCV 挑战赛 WIDER Challenge 获得人脸检测（Face Detection）冠军。\n参考文献：\n[1] Hao Z, Liu Y, Qin H, et al. Scale-Aware Face Detection[C]//[Proceedings of the IEEE](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Proceedings+of+the+IEEE&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQcm9jZWVkaW5ncyBvZiB0aGUgSUVFRSIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.HzBJTTVy-j0dpKUG1AdM8Z1VR7lc2Yazqq1Sa_dtxG8&zhida_source=entity) Conference on Computer Vision and [Pattern Recognition](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Pattern+Recognition&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQYXR0ZXJuIFJlY29nbml0aW9uIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.E02KC9OoRsMpdMmWKtRRZxt19s7V6qJIlhKalwPo8Io&zhida_source=entity). 2017: 6186-6195.\n[2] Liu Y, Li H, Yan J, et al. Recurrent Scale Approximation for Object Detection in CNN[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2017: 571-579.\n[3] Yang S, Xiong Y, Loy C C, et al. Face Detection through Scale-Friendly Deep Convolutional Networks[J]. arXiv preprint arXiv:1706.02863, 2017.\n[4] Zhu C, Zheng Y, Luu K, et al. CMS-RCNN: contextual multi-scale region-based CNN for unconstrained [face detection](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=face+detection&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJmYWNlIGRldGVjdGlvbiIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.3tS4GVxkxpUIBIRWsudG0fQOZdaBm8rFZ0BUYeqLJFc&zhida_source=entity)[M]//Deep Learning for [Biometrics](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Biometrics&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJCaW9tZXRyaWNzIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.Ov-X0IX1Um_S-_GwhgaiPCPbu5fvtQbAKPfBHFh7tY4&zhida_source=entity). Springer, Cham, 2017: 57-79.\n[5] Opitz M, Waltner G, Poier G, et al. Grid loss: Detecting occluded faces[C]//European conference on [computer vision](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=computer+vision&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJjb21wdXRlciB2aXNpb24iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.qFSLRRMr9nrwOwCuqvn9kiBUd6wHhZbLe0tNxMOAyvE&zhida_source=entity). Springer, Cham, 2016: 386-402.\n[6] Chen Y, Song L, He R. Adversarial Occlusion-aware Face Detection[J]. arXiv preprint arXiv:1709.05188, 2017.\n[7] Ge S, Li J, Ye Q, et al. Detecting Masked Faces in the Wild With LLE-CNNs[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2017: 2682-2690.\n[8] Liu W, Anguelov D, Erhan D, et al. Ssd: Single shot multibox detector[C]//European conference on computer vision. Springer, Cham, 2016: 21-37.\n[9] Lin T Y, Goyal P, Girshick R, et al. Focal Loss for Dense Object Detection[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 2980-2988.\n[10] Huang L, Yang Y, Deng Y, et al. Densebox: Unifying [landmark](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=landmark&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJsYW5kbWFyayIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.rJJZ3ol_3lkumMjBXWh93qiBC5DdtkFo_d4EDsTAQIc&zhida_source=entity) localization with end to end object detection[J]. arXiv preprint arXiv:1509.04874, 2015.\n[11] Yu J, Jiang Y, Wang Z, et al. Unitbox: An advanced object detection network[C]//Proceedings of the 2016 [ACM](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ACM&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJBQ00iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.2EHRVWPtNDH-NJPZt2a3g2z4M9Wjbu1OTJI7VDBNKSE&zhida_source=entity) on Multimedia Conference. ACM, 2016: 516-520.\n[12] Cai Z, Vasconcelos N. Cascade [r-cnn](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=r-cnn&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJyLWNubiIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.RfOc_1dyXjN9xRc924u1X9a9tKbDh062G3bh0COajz0&zhida_source=entity): Delving into high quality object detection[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2018: 6154-6162.\n[13] Chen X, Yu J, Kong S, et al. Towards Real-Time Accurate Object Detection in Both Images and Videos Based on Dual Refinement[J]. arXiv preprint arXiv:1807.08638, 2018.\n[14] Wang J, Chen K, Yang S, et al. Region proposal by guided anchoring[J]. arXiv preprint arXiv:1901.03278, 2019.\n[15] Kong T, Sun F, Liu H, et al. Consistent Optimization for Single-Shot Object Detection[J]. arXiv preprint arXiv:1901.06563, 2019.\n编辑于 2019-02-26 02:24\n[深度学习（Deep Learning）](https://www.zhihu.com/topic/19813032)\n[计算机视觉](https://www.zhihu.com/topic/19590195)\n[目标检测](https://www.zhihu.com/topic/19596960)\n​赞同 416​​55 条评论​783 ​6 \n​分享\n​申请转载​\n​\n![](../images/018.jpeg)\n未登录用户\n \n\n55 条评论\n默认\n最新\n[![王剑锋](../images/030.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\n好问题。包括，因为gt没有办法把遮挡区域分割出来。这里其实有一个（也许不太科学的）假设就是，我给一个带噪声的标注，它也能学个大概出来。被遮挡部分在整个数据集中的占比应该比较小，这样影响就会比较小。模型最后学出来的实际可视化效果，有点像学习了肤色的区域。\n2019-07-18\n​回复​3\n[![lovesnowbest](../images/020.jpg)](https://www.zhihu.com/people/a4586d51bd39153823dae6f522c774cb)\n[lovesnowbest](https://www.zhihu.com/people/a4586d51bd39153823dae6f522c774cb)\nhi 有个问题想请教一下 你在文中提到widerface官网已经更新了label文件 与widerface challenge保持一致 是指这个网站吗[WIDER FACE: A Face Detection Benchmark](http://link.zhihu.com/?target=http%3A//shuoyang1213.me/WIDERFACE/) 我瞅了一下好像没看到news里面写他们更新了label文件？最近一次更新是2017-3，想确认一下 感谢大佬！\n2020-10-30\n​回复​喜欢\n[![王剑锋](../images/030.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\nnews似乎是没更新，但文件和初版确实不同。不用纠结这个。\n2020-10-30\n​回复​喜欢\n展开其他 1 条回复​\n[![amos pang](../images/022.jpg)](https://www.zhihu.com/people/6be77af3a2692e0d04f36080559a4440)\n[amos pang](https://www.zhihu.com/people/6be77af3a2692e0d04f36080559a4440)\n回归的边界框和 ground truth 边界框之间的 IoU 当作 Classfication Subnet 的ground truth这不就是yolo的做法吗\n2019-12-13\n​回复​喜欢\n[![王剑锋](../images/030.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\nyolo的确是这么做的，出iou这个想法本身是trivial的；但iou并没那么容易学也没那么容易用。\n2019-12-13\n​回复​喜欢\n展开其他 1 条回复​\n[![茄子炒苹果](../images/024.jpg)](https://www.zhihu.com/people/f9d59221c7efbec29fe78ffeba104fee)\n[茄子炒苹果](https://www.zhihu.com/people/f9d59221c7efbec29fe78ffeba104fee)\n您好,非常好的工作!看到\"随着 IoU 逐渐提升，每个 Stage 的 IoU threshold 也逐渐增大\",请问对于每个stage的reg层,使用的anchor一样,backbone的feature一样,GT_box也一样,为什么往后每个stage的iou会逐渐提升?这里面cls层和reg层应该是解耦的把?\n2019-11-13\n​回复​喜欢\n[![清风醉](../images/025.jpg)](https://www.zhihu.com/people/1ab146c808f7a30eb528b8f21cffc1cf)\n[清风醉](https://www.zhihu.com/people/1ab146c808f7a30eb528b8f21cffc1cf)\n有没有单独对儿童的脸做检测的研究？在一幅图片中判断检测出是儿童还是成人？\n2019-10-02\n​回复​喜欢\n[![王剑锋](../images/031.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\n确实有年龄检测这个小方向。\n2019-10-02\n​回复​喜欢\n[![深几](../images/028.jpg)](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n[深几](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n强! 这个假设的提出真的是厉害\n2019-07-18\n​回复​喜欢\n[![深几](../images/028.jpg)](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n[深几](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n请问一下,fan中attention map的label是根据ground truth，ground truth的矩形框是否包含遮挡区域呢，如果包含遮挡区域，那么遮挡区域和非遮挡区域都设置为１，即需要高亮，那么这部分遮挡区域不是仍然对检测有害吗？(FPN论文表述：Considering the example with \noccluded face, most invisible parts are not useful and may \nbe harmful for detection. Some of the attention results can \nbe found in Figure 5. Our attention mask can enhance the \nfeature maps in the facial area, and diminish the opposition)\n2019-07-18\n​回复​喜欢\n[![Havanaonana](../images/029.jpg)](https://www.zhihu.com/people/04d842e77b2e4d86fa02b80d93944dbd)\n[Havanaonana](https://www.zhihu.com/people/04d842e77b2e4d86fa02b80d93944dbd)\n看了文章的实验，想请教一个问题。文章中表3只加anchor-based的时候，在wider face上hard set子集（73.7%)的AP比easy set(43.5%)和medium set(64.4%)都要高？正常情况下hard子集小脸多，ap应该是最低的，这里用了什么trick吗？\n2019-05-21\n​回复​喜欢\n[![王剑锋](../images/030.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\n没有，sface中anchor-based分支只做小脸，所以这里的对照组，anchor setting是倾向于小脸的，hard set大部分是小脸。\n2019-05-21\n​回复​喜欢\n[![王剑锋](../images/031.jpg)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](../images/body-ddf414f04793a667b2c1.png)\n1. 训练不是单纯resize，是crop之后再resize。2. 全卷积网络本来就支持变长图片输入，直接送完整的原图进网络。\n2019-05-14\n​回复​喜欢\n[![恒少](../images/032.jpg)](https://www.zhihu.com/people/c8ca0b228fdfcd92189f4cbc1767209d)\n[恒少](https://www.zhihu.com/people/c8ca0b228fdfcd92189f4cbc1767209d)\n看了一下sface的论文，训练是resize到600*600，没太理解测试时4kface用原图是什么意思，是resize到600*600，还是在原图上滑动检测？\n2019-05-14\n​回复​喜欢\n点击查看全部评论\n![](../images/018.jpeg)\n未登录用户\n \n\n关于作者\n[![王剑锋](../images/033.jpg)](https://www.zhihu.com/people/wjfwzzc)\n[王剑锋](https://www.zhihu.com/people/wjfwzzc)\n人类的悲欢并不相通。\n[​](https://zhuanlan.zhihu.com/p/96956163)\n北京航空航天大学 软件工程硕士\n[ 回答 **55** ](https://www.zhihu.com/people/wjfwzzc/answers)[ 文章 **3** ](https://www.zhihu.com/people/wjfwzzc/posts)[ 关注者 **46,493** ](https://www.zhihu.com/people/wjfwzzc/followers)\n​关注他​发私信\n大家都在搜\n换一换\n[江歌妈妈发长文尘埃终将落定704 万](https://www.zhihu.com/search?q=%E6%B1%9F%E6%AD%8C%E5%A6%88%E5%A6%88%E5%8F%91%E9%95%BF%E6%96%87%E5%B0%98%E5%9F%83%E7%BB%88%E5%B0%86%E8%90%BD%E5%AE%9A&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[中国男足 0-5 巴勒斯坦562 万](https://www.zhihu.com/search?q=%E4%B8%AD%E5%9B%BD%E7%94%B7%E8%B6%B3+0-5+%E5%B7%B4%E5%8B%92%E6%96%AF%E5%9D%A6&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[原央视主持人阿丘回应被通报419 万](https://www.zhihu.com/search?q=%E5%8E%9F%E5%A4%AE%E8%A7%86%E4%B8%BB%E6%8C%81%E4%BA%BA%E9%98%BF%E4%B8%98%E5%9B%9E%E5%BA%94%E8%A2%AB%E9%80%9A%E6%8A%A5&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[华为与赛力斯达成新五年合作409 万](https://www.zhihu.com/search?q=%E5%8D%8E%E4%B8%BA%E4%B8%8E%E8%B5%9B%E5%8A%9B%E6%96%AF%E8%BE%BE%E6%88%90%E6%96%B0%E4%BA%94%E5%B9%B4%E5%90%88%E4%BD%9C&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[迪拜航空确认航班发生事故398 万](https://www.zhihu.com/search?q=%E8%BF%AA%E6%8B%9C%E8%88%AA%E7%A9%BA%E7%A1%AE%E8%AE%A4%E8%88%AA%E7%8F%AD%E5%8F%91%E7%94%9F%E4%BA%8B%E6%95%85&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[东航回应网传空姐跪地道歉326 万](https://www.zhihu.com/search?q=%E4%B8%9C%E8%88%AA%E5%9B%9E%E5%BA%94%E7%BD%91%E4%BC%A0%E7%A9%BA%E5%A7%90%E8%B7%AA%E5%9C%B0%E9%81%93%E6%AD%89&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[王楚钦：不知道为什么就是感觉累320 万](https://www.zhihu.com/search?q=%E7%8E%8B%E6%A5%9A%E9%92%A6%EF%BC%9A%E4%B8%8D%E7%9F%A5%E9%81%93%E4%B8%BA%E4%BB%80%E4%B9%88%E5%B0%B1%E6%98%AF%E6%84%9F%E8%A7%89%E7%B4%AF&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[江苏高考作文《衬衫的价格为 9 磅 15 便士》爆火268 万](https://www.zhihu.com/search?q=%E6%B1%9F%E8%8B%8F%E9%AB%98%E8%80%83%E4%BD%9C%E6%96%87%E3%80%8A%E8%A1%AC%E8%A1%AB%E7%9A%84%E4%BB%B7%E6%A0%BC%E4%B8%BA+9+%E7%A3%85+15+%E4%BE%BF%E5%A3%AB%E3%80%8B%E7%88%86%E7%81%AB&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[女装网店开始用防拆带了265 万](https://www.zhihu.com/search?q=%E5%A5%B3%E8%A3%85%E7%BD%91%E5%BA%97%E5%BC%80%E5%A7%8B%E7%94%A8%E9%98%B2%E6%8B%86%E5%B8%A6%E4%BA%86&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[孕妇骑车别车被司机踹翻257 万](https://www.zhihu.com/search?q=%E5%AD%95%E5%A6%87%E9%AA%91%E8%BD%A6%E5%88%AB%E8%BD%A6%E8%A2%AB%E5%8F%B8%E6%9C%BA%E8%B8%B9%E7%BF%BB&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n### 推荐阅读\n[ ![人脸检测与深度学习](../images/035.jpg)人脸检测与深度学习 岑雨 ](https://zhuanlan.zhihu.com/p/25335957)# [人脸检测 MTCNN 简介 人脸检测 MTCNN 简介1 简介 论文：Joint Face Detection and Alignment using Multi-task Cascaded Convolutional Networks 下载：https://arxiv.org/abs/1604.02878 代码：https://github.… 我不爱机器...发表于模型复现 ](https://zhuanlan.zhihu.com/p/493521967)# [人脸检测与识别年度进展概述 深度学习大讲堂致力于推送人工智能，深度学习方面的最新技术，产品以及活动。请关注我们的知乎专栏！ 编者按：这是一个看脸的世界，尤其在这个刷脸就能够影响银行卡余额的时代，如何准确地… 程程发表于深度学习大... ](https://zhuanlan.zhihu.com/p/27638463)[ ![传统人脸检测识别的简述总结及现今流行框架](../images/037.jpg)传统人脸检测识别的简述总结及现今流行框架 计算机视觉...发表于计算机视觉... ](https://zhuanlan.zhihu.com/p/27225024) \n\n_想来知乎工作？请发送邮件到 jobs@zhihu.com_\n打开知乎App\n在「我的页」右上角打开扫一扫\n![](../images/body-0f9788d006ab0f4da762.png)\n其他扫码方式：微信\n下载知乎App\n无障碍模式\n验证码登录\n密码登录\n[开通机构号](https://zhuanlan.zhihu.com/org/signup)\n中国 +86\n获取短信验证码\n忘记密码\n登录/注册\n其他方式登录\n未注册手机验证后自动登录，注册即代表同意[《知乎协议》](https://www.zhihu.com/term/zhihu-terms)[《隐私保护指引》](https://www.zhihu.com/term/privacy)\n扫码下载知乎 App\n关闭二维码\n", "metadata": { "title": "人脸检测江湖的那些事儿——从旷视说起 - 知乎", "description": "题外话这是 Face++ Detection Team（R4D）第 3 篇知乎专栏。如果说该专栏的定位是双向交流，一个比较贴切的词可能是「窗口」：一方面，我们希望从论文的生产、研究员的成长乃至公司的文化氛围等多方面被了解，被认…", "keywords": "深度学习（Deep Learning）,计算机视觉,目标检测", "author": null, "og:title": "人脸检测江湖的那些事儿——从旷视说起", "og:url": "https://zhuanlan.zhihu.com/p/56619497", "og:description": "题外话这是 Face++ Detection Team（R4D）第 3 篇知乎专栏。如果说该专栏的定位是双向交流，一个比较贴切的词可能是「窗口」：一方面，我们希望从论文的生产、研究员的成长乃至公司的文化氛围等多方面被了解，被认…", "og:image": "https://picx.zhimg.com/v2-6828f18a8189df56402408579992a0a9_720w.jpg?source=172ae18b", "og:type": "article", "og:site_name": "知乎专栏" }, "paywall": { "listed_paid": false, "detected": false, "marker": "", "public_only": false, "policy": "付费/会员内容只保留页面公开可见部分，不绕过付费墙" }, "crawl": { "success": true, "status_code": 200, "error": "" }, "code_blocks": [], "images": [ { "status": "http_403", "url": "https://zhuanlan.zhihu.com/p/56619497", "src": "https://zhuanlan.zhihu.com/p/56619497", "alt": "", "downloaded": false, "discovery": "saved_markdown", "retried_at": "2026-10-20T17:55:03Z" } ], "audio": [], "videos": [], "links": [ { "type": "internal", "href": "https://www.zhihu.com" }, { "type": "internal", "href": "https://www.zhihu.com/signin?next=%2Ffollow" }, { "type": "internal", "href": "https://www.zhihu.com/signin?next=%2F" }, { "type": "internal", "href": "https://www.zhihu.com/signin?next=%2Fhot" }, { "type": "internal", "href": "https://www.zhihu.com/signin?next=%2Fcolumn-square" }, { "type": "internal", "href": "https://www.zhihu.com/signin?next=%2Fring-feeds" }, { "type": "internal", "href": "https://www.zhihu.com/project-square" }, { "type": "internal", "href": "https://www.zhihu.com/fiore/h5/vip-web" }, { "type": "internal", "href": "https://zhida.zhihu.com/" }, { "type": "internal", "href": "https://www.zhihu.com/column/c_1065911842173468672" }, { "type": "internal", "href": "https://www.zhihu.com/people/wjfwzzc" }, { "type": "internal", "href": "https://www.zhihu.com/question/48510028" }, { "type": "internal", "href": "https://www.zhihu.com/column/r-detection" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Face%2B%2B+Detection+Team&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJGYWNlKysgRGV0ZWN0aW9uIFRlYW0iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.-_3INI-t7wr0Gx0r3MTpn2ic_UPxYVFHVwkZ892gwso&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%99%8D%E6%9C%AC%E5%A2%9E%E6%95%88&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpmY3mnKzlop7mlYgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.wYjahAXPp6meKklVapfN29jZOIbfe48VCiKL_vHbuW0&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E6%A3%80%E6%B5%8B%E6%8A%80%E6%9C%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjmo4DmtYvmioDmnK8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.FF052_HdzLZMMbZMG9RjTPgjF67rL77wv9Es8GRlDOs&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%80%9A%E7%94%A8%E7%89%A9%E4%BD%93%E6%A3%80%E6%B5%8B&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpgJrnlKjniankvZPmo4DmtYsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.BPDdqHcvAuc3PzrV2RzgJu1v7kQIymOG7KpFQ9JrVv0&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E5%AF%B9%E9%BD%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjlr7npvZAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.1G_V35xZU8TkYDfgdCLRXbet2sNmuVTZ1vZIKHb6uKQ&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E4%BA%BA%E8%84%B8%E5%88%86%E6%9E%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjliIbmnpAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.U4boJSFwset8M7Vry8Cx3fPmVAggOnnsCyTmD6Ss6uY&zhida_source=entity" }, { "type": "internal", "href": "https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%9B%BE%E5%83%8F%E9%87%91%E5%AD%97%E5%A1%94&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlm77lg4_ph5HlrZfloZQiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.OkB7jdjuR9-PqBpITvF7QmGSmzqHFQvxSEYbgLEeQQE&zhida_source=entity" }, { "type": "external", "href": "javascript:void(0)" } ], "repair_version": 2, "repaired_at": "2026-10-20T17:28:31Z", "source_url": "https://zhuanlan.zhihu.com/p/56619497", "delivery_status": "unverified", "discovery_status": "http_403", "missing_reason": "源页面未重新核验:http_403；已按保留正文补采图片", "repair_error": "", "actual_video_files": [], "expected_saved_body_images": 1, "image_discovery": "saved_markdown", "source_body_markdown": "[![](https://zhuanlan.zhihu.com/p/56619497)](javascript:void\\(0\\))\n![ZhiHu logo](https://static.zhihu.com/heifetz/assets/wechat-share-logo.39ea9ecd.png)\n[](https://www.zhihu.com)\n[关注](https://www.zhihu.com/signin?next=%2Ffollow)[推荐](https://www.zhihu.com/signin?next=%2F)[热榜](https://www.zhihu.com/signin?next=%2Fhot)[专栏](https://www.zhihu.com/signin?next=%2Fcolumn-square)[圈子](https://www.zhihu.com/signin?next=%2Fring-feeds)[AI WorksBeta ](https://www.zhihu.com/project-square)[故事](https://www.zhihu.com/fiore/h5/vip-web)\n​\n[直答](https://zhida.zhihu.com/)\n切换模式\n登录/注册\n人脸检测江湖的那些事儿——从旷视说起\n首发于[R4D](https://www.zhihu.com/column/c_1065911842173468672)\n切换模式\n![人脸检测江湖的那些事儿——从旷视说起](https://picx.zhimg.com/70/v2-6828f18a8189df56402408579992a0a9_1440w.image?source=172ae18b&biz_tag=Post)\n# 人脸检测江湖的那些事儿——从旷视说起\n[![王剑锋](https://picx.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=32738c0c&needBackground=1)](https://www.zhihu.com/people/wjfwzzc)\n[王剑锋](https://www.zhihu.com/people/wjfwzzc)\n[​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)](https://www.zhihu.com/question/48510028)\n北京航空航天大学 软件工程硕士\n知乎日报收录\n[收录于 · BaseDetection](https://www.zhihu.com/column/r-detection)\n416 人赞同了该文章\n## 题外话\n这是 [Face++ Detection Team](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Face%2B%2B+Detection+Team&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJGYWNlKysgRGV0ZWN0aW9uIFRlYW0iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.-_3INI-t7wr0Gx0r3MTpn2ic_UPxYVFHVwkZ892gwso&zhida_source=entity)（R4D）第 3 篇知乎专栏。如果说该专栏的定位是双向交流，一个比较贴切的词可能是「窗口」：一方面，我们希望从论文的生产、研究员的成长乃至公司的文化氛围等多方面被了解，被认识，被熟悉，希望携手共同见证最优检测算法的研究、创新与落地，突破认知边界，实现[降本增效](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%99%8D%E6%9C%AC%E5%A2%9E%E6%95%88&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpmY3mnKzlop7mlYgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.wYjahAXPp6meKklVapfN29jZOIbfe48VCiKL_vHbuW0&zhida_source=entity)，为客户和社会创造最大价值；另一方面，我们也希望了解读者的想法，增加与读者的互动，形成双向反馈的正向沟通机制。R4D 后续也会组织线下活动，加大加深彼此交流。如果你感兴趣，或者想加入，欢迎联系 Face++ Detection Team 负责人俞刚 （yugang@megvii.com）。\n \n\n本次分享的主题是人脸检测（Face Detection），分享者是旷视科技王剑锋，来自 Face++ Detection 组。通过这篇文章，可以一窥旷视近两年在该方向的工作与思考，并希望为计算机视觉社区带来启发，进一步推动[人脸检测技术](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E6%A3%80%E6%B5%8B%E6%8A%80%E6%9C%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjmo4DmtYvmioDmnK8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.FF052_HdzLZMMbZMG9RjTPgjF67rL77wv9Es8GRlDOs&zhida_source=entity)的研究与落地。人脸检测是人脸识别的第一站，旷视的努力主要体现在紧紧围绕人脸检测领域顽固而核心的问题展开，攻坚克难，功夫花在刀刃上，比如人脸尺度的变动及遮挡等，实现速度与精度的双重涨点。\n## 前言\n人脸检测的目的是，给定任意图像，返回其中每张人脸的边界框（Bounding Box）坐标，实际操作上它对[通用物体检测](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%80%9A%E7%94%A8%E7%89%A9%E4%BD%93%E6%A3%80%E6%B5%8B&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpgJrnlKjniankvZPmo4DmtYsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.BPDdqHcvAuc3PzrV2RzgJu1v7kQIymOG7KpFQ9JrVv0&zhida_source=entity)（General Object Detection）有较多借鉴，是通用物体检测技术的聚焦和细分。由于人脸检测是所有人脸分析算法的前置任务，诸如[人脸对齐](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E5%AF%B9%E9%BD%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjlr7npvZAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.1G_V35xZU8TkYDfgdCLRXbet2sNmuVTZ1vZIKHb6uKQ&zhida_source=entity)、人脸建模、人脸识别、人脸验证/认证、头部姿态跟踪、面部表情跟踪/识别、性别/年龄识别等等技术皆以人脸检测为先导，它的好坏直接影响着[人脸分析](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E4%BA%BA%E8%84%B8%E5%88%86%E6%9E%90&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjliIbmnpAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.U4boJSFwset8M7Vry8Cx3fPmVAggOnnsCyTmD6Ss6uY&zhida_source=entity)的技术走向和落地，因而在学术界和工业界引起广泛的重视和投入。\n如今，随着深度学习普及，人脸检测与通用物体检测已相差无几，作为二分类任务，其难度也低于通用物体检测，因此现阶段人脸检测研究更需走差异化路线，从实际应用中汲取营养。\n尺度变化是人脸检测不同于通用物体检测的一大问题。通用物体的尺度变化范围一般在十几倍之内；与之相比，人脸的尺度变化范围由于摄像头不断升级，在 4K 甚至更高分辨率场景中可达数十倍甚至上百倍。面对这一问题，[1, 2] 给出的答案是寻找最优尺度多次采样原图，其本质是优化[图像金字塔](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%9B%BE%E5%83%8F%E9%87%91%E5%AD%97%E5%A1%94&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlm77lg4_ph5HlrZfloZQiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.OkB7jdjuR9-PqBpITvF7QmGSmzqHFQvxSEYbgLEeQQE&zhida_source=entity)（Image [Pyramid](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Pyramid&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQeXJhbWlkIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.MpBrZ_GipYiKcHqPVYlIUka0Rq1IqXyO_4n15cYwxWQ&zhida_source=entity)）；[3, 4] 则利用不同深度的特征图适应不同尺度的人脸，其本质是优化特征金子塔（Feature Pyramid）；而旷视自主研创的 SFace 方法试着从完全不同的角度切入这一问题。这是本文第一部分。\n和尺度变化一样，遮挡也是人脸检测面临的常见挑战之一。实际场景中的眼镜、口罩、衣帽、头盔、首饰以及肢体等皆会遮挡人脸，拉低人脸检测的精度。对此，[5, 6] 尝试提升[神经网络](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnpZ7nu4_nvZHnu5wiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.VvWqHXoa7n5N1ulWTec552nVF3h7ZwGQP06WhXFdAmw&zhida_source=entity)适应遮挡情况的能力，[7] 则将问题转化为遮挡与非遮挡人脸在[向量空间](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%90%91%E9%87%8F%E7%A9%BA%E9%97%B4&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlkJHph4_nqbrpl7QiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.3FjqLD1inU_SdQH-g8mShwzdrVYmuY_JvbF5p5JHiJw&zhida_source=entity)中的距离这一度量学习问题。此外，很多深度学习方法训练时辅用的[数据增强技术](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E6%95%B0%E6%8D%AE%E5%A2%9E%E5%BC%BA%E6%8A%80%E6%9C%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmlbDmja7lop7lvLrmioDmnK8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.SpFYRLbuOfgRu4OvkiU88g7WAGe05UYFgbZwIBYTzgg&zhida_source=entity)也在一定程度上提高了网络对遮挡情形的[鲁棒性](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E9%B2%81%E6%A3%92%E6%80%A7&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLpsoHmo5LmgKciLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.u3kkDyoLPKakrsUArsSlJfve6yWAKuKh700Ar3mSzGE&zhida_source=entity)；而旷视原创的全新算法 FAN 也是针对人脸遮挡问题而提出。这是本文第二部分。\n如上所述，人脸检测是人脸关键点、[人脸识别](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=3&q=%E4%BA%BA%E8%84%B8%E8%AF%86%E5%88%AB&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjor4bliKsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MywiemRfdG9rZW4iOm51bGx9.r_W4LJwxviInXnVBjjY1dKulv1twLhsO7O9okZSxL_o&zhida_source=entity)等的前置任务，人脸检测框质量直接影响着整条 Pipeline 的表现，常见人脸检测数据集的评测指标对边界框质量缺乏关注；2018 WIDER Challenge Face Detection 首次采用相同于 MS COCO 的评测方式，表明这一状况已有大幅改善；本文第三部分则将介绍这次比赛夺冠的一些诀窍。\n## 尺度变化： SFace\n[](https://link.zhihu.com/?target=https%3A//arxiv.org/abs/1804.06559)\n目前的人脸检测方法仍无法很好地应对大范围尺度变化，基于图像金字塔的方法理论上可覆盖所有尺度，但必须多次采样原图，导致大量重复计算；而基于[特征金字塔](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%89%B9%E5%BE%81%E9%87%91%E5%AD%97%E5%A1%94&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHph5HlrZfloZQiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.JP44e98lHNkxxClDpGYeP5A1BxU_PJvmJx8E9TcQQpQ&zhida_source=entity)的方法，[特征层数](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%89%B9%E5%BE%81%E5%B1%82%E6%95%B0&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHlsYLmlbAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.uF8sZgRn8LTAMX1n1ekO-rjapHS59pxWSXJTcKCCLIs&zhida_source=entity)不宜加过多，从而限制了模型处理尺度范围的上限。是否存在一种方法，图像只通过模型一次，同时又覆盖到足够大的尺度范围呢？\n目前，单步检测方法大致可分为两类：1）Anchor-based方法，如 SSD[8]、RetinaNet[9] 等；2）Anchor-free方法，如 DenseBox[10]、UnitBox[11] 等。Anchor-based 方法处理的尺度范围虽小，但更精准；Anchor-free 方法覆盖的尺度范围较大，但检测微小尺度的能力低下。一个非常自然的想法就是，两种方法可以融合进一个模型吗？理想很丰满，现实很骨感，Anchor-based 和 Anchor-free 方法的输出在定位方式和置信度得分方面差异显著，直接合并两个输出困难很大，具体原因如下：\n其一，对于 Anchor-based 方法，ground truth IoU ≥ 0.5 的锚点将被视为正训练样本。可以发现，正负样本的定义与边界框回归结果无关，这就导致 Anchor-based 分支每个锚点输出的分类置信度实质上表示的是「锚点框住的区域是人脸」的置信度，而不是「网络预测的回归框内是人脸」的置信度。故而分类置信度很难评估网络实际的定位精度。对于在业务层将 Classfication Subnet 和 Regression Subnet 分开的网络，情况将变得更为严重。\n其二，对于 Anchor-free 方法，网络训练方式类似于目标分割任务。输出的特征图以边界框中心为圆心，半径与边界框尺度成比例的椭圆区域被定义为正样本区域，特征图其它位置（像素）被视为背景。通过这种方式，Anchor-free 分支的分类[置信度](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=6&q=%E7%BD%AE%E4%BF%A1%E5%BA%A6&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnva7kv6HluqYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NiwiemRfdG9rZW4iOm51bGx9.uJWwHua0KwL7uu2igb96LQJ6PLPLQZRKIZ5Mo66F6rw&zhida_source=entity)得分实质为「该像素落在人脸上」的置信度，而且该分类置信度与定位的准确度的关联同样很弱。\n总而言之，Anchor-based 方法和 Anchor-free 方法的分类置信度都与回归定位精度关联甚微，其置信度得分也分别代表着不同的含义。因此通过分类结果直接合并两个分支输出的边界框是不合理的，并且可能导致[检测性能](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E6%A3%80%E6%B5%8B%E6%80%A7%E8%83%BD&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmo4DmtYvmgKfog70iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.eJq28wlO8kvmhZhWN7Kg43CMVdpPpFEgnkrN2N_ctZw&zhida_source=entity)的急剧下降。\n因此，可以将回归的边界框和 ground truth 边界框之间的 IoU 当作 Classfication Subnet 的ground truth，这正是 SFace 所做的事情。\n![](https://pica.zhimg.com/v2-551e5766d8f278886bb3917feca8b078_1440w.jpg)\nSFace 网络结构\n具体而言，SFace 设计了Anchor-based 和 Anchor-free 两个分支，前者基于 RetinaNet，后者基于 UnitBox；两个分支都在训练第一步通过 Regression Subnet 生成边界框；接着计算[边界框](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=10&q=%E8%BE%B9%E7%95%8C%E6%A1%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLovrnnlYzmoYYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MTAsInpkX3Rva2VuIjpudWxsfQ.4tmqwbzVVxPjCf_c27VuYMu1KRKeWDF-NUs3dGpmxXs&zhida_source=entity)和 ground truth 边界框之间的 IoU；（Anchor-based 分支的）锚点和（Anchor-free 分支的）像素中 IoU ≥ 0.5 的结果将视为 Classfication Subnet 的正样本，其它则视为负样本，Classfication Loss 采用 Focal Loss。我们还尝试过直接回归 IoU，然而实验结果表明，相较于采用 Sigmoid Cross Entropy 或 Focal Loss，直接回归 IoU 所得结果方差较大，实际效果欠佳。\nAnchor-based 分支和 Anchor-free 分支都使用 IoU Loss 做为 Regression Loss。这种调整有助于统一两个分支的输出方式，优化组合结果。通过以上修正，两个分支的[分类子网络](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%88%86%E7%B1%BB%E5%AD%90%E7%BD%91%E7%BB%9C&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLliIbnsbvlrZDnvZHnu5wiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.GM3sZzcwmsCw3-medpSM7YegjER72kAdOqrCCvn7Qfo&zhida_source=entity)的实质含义得到统一，分类置信度的分布得到一定程度的弥合，从而 SFace 可有效融合两个分支的结果。\n此外，SFace 必须运行很快才有实际意义，否则大可以选择做图像金字塔。为此，基于 Xception，SFace 采用了一个 FLOPs 仅有 39M 的 Backbone，称之为 Xception-39M，每个 Block 包括 3 个 SeparableConv 的 Residual Block。Xception-39M 运算量非常小，感受野却高达 1600+，十分适合处理更高分辨率图像。\n![](https://pic1.zhimg.com/v2-c10cebd2d91ec01d6d2d327424ebfdea_1440w.jpg)\nXception-39M 网络结构\n![](https://pica.zhimg.com/v2-cc0d281b2f5d3e3a7db9cb05f536b6da_1440w.jpg)\nXception-39M 单一 Block 结构\nSFace Backbone 理论计算量只有下表中部分方法的 1/200（这些方法多采用 VGG-16、[ResNet-101](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ResNet-101&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJSZXNOZXQtMTAxIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.-PR5Rfr2bj0PnyCTnZsIHIcxxfjTRwML2R3HVfpt9LI&zhida_source=entity) 等作为 Backbone），且都采用多尺度测试；而 SFace 测试全部在单一尺度下进行。事实上，SFace 的设计初衷正是只在一个尺度下测试即可覆盖更大范围的尺度变化。\n![](https://pic4.zhimg.com/v2-35ea92c90a571560aa78ef6c2bfcaf4d_1440w.jpg)\nWIDER Face 验证集和测试集的 PR 曲线\n消融实验证明直接融合 Anchor-based 与 Anchor-free 方法不可行，而 SFace 提出的融合方法是有效的。Anchor-free [分支覆盖](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%88%86%E6%94%AF%E8%A6%86%E7%9B%96&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLliIbmlK_opobnm5YiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Fcgx5pg8Oi8SnSkrGlygpz84ch6J-RgO6o0ELPdHBJg&zhida_source=entity)了绝大多数尺度（easy set 和 medium set），而 Anchor-based 分支提升了微小人脸（hard set）的检测能力。\n![](https://picx.zhimg.com/v2-53805bcffe756f08e9cdd105dcf7f601_1440w.jpg)\nWIDER Face 验证集的消融实验\n4K 分辨率下，SFace 运行速度上接近实时，据知这是首个在 4K 分辨率下 WIDER Face hard AP 高于 75 的实时人脸检测方法。\n![](https://pic4.zhimg.com/v2-8c7ad02f858808ee261939f705cf1dd9_1440w.png)\nSFace 在不同分辨率下的运行时间（单张 NVIDIA Titan Xp）\n## 遮挡：FAN\n[](https://link.zhihu.com/?target=https%3A//arxiv.org/abs/1711.07246)\n我们可以从另一个角度考虑遮挡问题。一个物体在清晰可见、无遮挡之时，其特征图对应区域的响应值较高；如果物体有（部分）遮挡，理想情况应是只有遮挡区域响应值下降，其余部分不受影响；但实际情况却是整个物体所在区域的响应值都会降低，进而导致模型 Recall 下降。\n解决这个问题大概有两种思路：1）尽可能保持住未遮挡区域的响应值，2）把无遮挡区域降低的响应值弥补回来；前者较难，后者则相对容易。一个简单的做法是让检测器学习一个 Spatial-wise Attention，它应在无遮挡区域有更高的响应，然后借助它以某种方式增强原始的特征图。\n那么，如何设计这个 Spatial-wise Attention。最简单考虑，它应当是一个 Segmentation Mask 或者 Saliency Map。基于 RetinaNet，FAN 选择增加一个 Segmentation 分支，对于学到的 Score Map，做一个 exp 把取值范围从 [0, 1] 放缩到[1, e]，然后乘以原有的特征图。为简单起见，Segmentation 分支只是叠加 2 个 Conv3x3，Loss 采用 Sigmoid Cross Entropy。\n![](https://pic4.zhimg.com/v2-a725cde47bbcf63880354531e69f9b73_1440w.jpg)\nFAN 的分层 Attention\n这里将面对的一个问题是，Segmentation 分支的 [ground truth](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=5&q=ground+truth&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJncm91bmQgdHJ1dGgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NSwiemRfdG9rZW4iOm51bGx9.ctvwtUeNvWlNnTQIj88xcj6tU0uZP2CjhbS32p8ntq8&zhida_source=entity) 是什么，毕竟不存在精细的 Pixel-level 标注。由于人脸图像近似椭圆，一个[先验信息](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E5%85%88%E9%AA%8C%E4%BF%A1%E6%81%AF&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLlhYjpqozkv6Hmga8iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Vym0LUWJr7oQyv7iLmTD8RunQsiA7cX4kWGwgbKfQGU&zhida_source=entity)是边界框区域内几乎被人脸填满，背景区域很小；常见的遮挡也不会改变「人脸占据边界框绝大部分区域」这一先验。基于这一先验可以直接输出一个以边界框矩形区域为正样本、其余区域为负样本的 Mask，并将其视为一个「有 Noise 的 Segmentation Label」作为实际网络的 ground truth。我们也尝试根据该矩形截取一个椭圆作为 Mask，但实验结果表明基本没有区别。\n这样的 ground truth 真能达到效果吗？通过可视化已学到的 Attention Map，发现它确实可以规避开部分遮挡区域，比如一个人拿着话筒讲话，Attention Map 会高亮人脸区域，绕开话筒区域。我们相信，如果采用更复杂的手段去清洗 Segmentation Label，实际效果将有更多提高。\n![](https://pic2.zhimg.com/v2-71cae5861b569554b0debd37807d4965_1440w.jpg)\nFAN 网络结构\nFAN 在 WIDER Face 上曾经保持了半年的 state-of-the-arts。由于仅仅验证方法的可行性，FAN 没有叠加任何 trick，只在原始的 RetinaNet 上调整锚点框，增加我们的 Spatial Attention，因此 FAN 还有很大的上升空间。\n![](https://pic4.zhimg.com/v2-bdb073cb7c742a8edcf3ab77075668e5_1440w.jpg)\nWIDER Face 验证集的 PR 曲线\n## 定位精度：2018 WIDER Challenge Face Detection\n第三部分介绍一下旷视科技夺魁 [WIDER Face and Pedestrian Challenge 2018](https://link.zhihu.com/?target=http%3A//wider-challenge.org/) 上的解决方案。2018 WIDER Challenge 有 3 个 track，旷视参战了其中的 Face Detection。更多信息请参见：[ECCV 2018 | 旷视科技夺获人工智能顶赛Wider Challenge人脸检测冠军](https://link.zhihu.com/?target=https%3A//mp.weixin.qq.com/s%3Fsrc%3D11%26timestamp%3D1550658769%26ver%3D1440%26signature%3DbCoNvoBIvCz%2ALUP7KMaWSPfJT1D4hvF2L4sgWPnW%2Av4vbFMIGW5CqBsAu5NcGyeQkIWzicMMi2P3y-a2%2AbJDwUM3Xo90m-mnXiHfn23zFvA6CDGGNkhdQAD7vQ3CFB3y%26new%3D1)。\n![](https://pic2.zhimg.com/v2-be14de29c67e0fa2c26ebb5887d6420d_1440w.jpg)\n2018 WIDER Challenge Face Detection 排名\nFace Detection 使用 WIDER Face 数据集原始图像，但是 Label 做了一定修正。据我们统计，Label 数量稍多于原数据集，导致在不对模型做任何更改的情况下，使用新 Label 也会比原 Label 涨点（更新：目前WIDER Face官网上已经用WIDER Challenge Label覆盖原Label，不再存在此问题）。此外，WIDER Challenge [数据集](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=4&q=%E6%95%B0%E6%8D%AE%E9%9B%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmlbDmja7pm4YiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NCwiemRfdG9rZW4iOm51bGx9.YZ4usj5Sm0Qec7vN6PteTFJzwKXoHc3wSfTj44oXw8M&zhida_source=entity)不同于 WIDER Face 数据集的是，使用了相同于 MS COCO 的Metrics，这意味着对模型的回归能力提出了更高的要求。\n旷视夺冠的方法仍然基于 RetinaNet。通过对比常见 Backbone，我们给出了以下表格的结果。可以发现，更强的 Backbone 并不意味着更好的 Detection 能力。一些 Backbone 分类能力更强，但是提供的特征或者分层特征并不够好；[感受野](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E6%84%9F%E5%8F%97%E9%87%8E&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLmhJ_lj5fph44iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.fYfUmv2MoWbFuFwU42IEgqIDW3SNxXe7qJDs3S8XalU&zhida_source=entity)等对 Detection 至关重要的因素也不合适；对于二分类问题而言也存在过拟合现象。由于实验周期等原因，我们最后简单选择了 [ResNet-50](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ResNet-50&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJSZXNOZXQtNTAiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Wq25FFlZVqiBpnen6vdS_S5tJ8NSz05uQeeSVRkME9k&zhida_source=entity) 和 [DenseNet-121](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=DenseNet-121&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJEZW5zZU5ldC0xMjEiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.lOClyRHuqjvSRQjRc3BRVeBhU-dVaC-YLbD1_ykDhAM&zhida_source=entity) 继续后面的实验。需要声明的是，它们在很多情况下都不是最优 Backbone，我们有必要思考何种 Backbone 提取的特征最适合做检测。\n![](https://pic2.zhimg.com/v2-05dc74b0949f6a8cc4920e9d92004f75_1440w.jpg)\n不同 Backbone 的比较\n我们在 Backbone 上应用了 GAP trick，这在上篇知乎专栏（[ycszen：语义分割江湖的那些事儿——从旷视说起](https://zhuanlan.zhihu.com/p/55263898)）有所介绍。该 trick 同样适用于 Detection。我们还使用了 Deformable Conv，但其贡献主要是扩大 ResNet 原本不高的感受野。\n对于 Head 部分，我们首先将 Smooth L1 Loss 换成 IoU Loss，这是为照顾数据中占比较多的小脸，但实际分析一下可以发现，在[锚点框](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=3&q=%E9%94%9A%E7%82%B9%E6%A1%86&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLplJrngrnmoYYiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MywiemRfdG9rZW4iOm51bGx9.xeUETNe3tK-N4JNMEay5NxKYUWOpJvUE7XLUUdyb8Ao&zhida_source=entity)合适的情况下，IoU Loss 的提升会很微小。我们对 Head 的主要改动是做一个简单的 Cascade。Cascade R-CNN[12] 是最早通过做 Cascade 提升模型 Regression 能力的方法，我们希望将其移植到单步检测器上。\n![](https://picx.zhimg.com/v2-d43cf6e64e82e9116a834e2848938e67_1440w.jpg)\nCascade R-CNN\n可以发现，具体做法部分借鉴了 SFace，即把前一个 Stage 的预训练边界框与 ground truth 边界框之间的 IoU 作为下一个 Stage 的 Classification Label；随着 IoU 逐渐提升，每个 Stage 的 IoU threshold 也逐渐增大，这与 Cascade R-CNN 很类似。\n![](https://pic1.zhimg.com/v2-3bae5af0da015c9b65e6da5c8d49adfa_1440w.jpg)\n旷视使用的单步检测 Cascade 方案\n这个 Cascade 方案不难想到，也简单易行，但是的确涨点，Inference 时也只需保留最后一个 Stage，不会增加 Inference 成本；这个方案也有自己的问题，最大的是每个 Stage 在共用同一个[特征图](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=7&q=%E7%89%B9%E5%BE%81%E5%9B%BE&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnibnlvoHlm74iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6NywiemRfdG9rZW4iOm51bGx9.l0L_nvn3hw-adBeemPlRMKpFxxxuHmnzmTbWt2NCYzg&zhida_source=entity)，也共用不变的 anchor，对此已有一些相关论文提出改进，如[13, 14, 15]。\n![](https://picx.zhimg.com/v2-cc7375b9f4e7d703835741f7f9efa56b_1440w.jpg)\n单步检测 Cascade 的对比实验\n此外，我们还在 Data Augmentation、Ensemble 等方面做了改进，由于比较 trivial，这里不再赘述。我们曾在 ECCV 2018 Workshop 展示过该方案，更多内容请查阅 slides：\n[](https://link.zhihu.com/?target=https%3A//megvii-my.sharepoint.cn/%3Ap%3A/g/personal/wangjianfeng_megvii_com/ESiVDS9fO9RClWSAw3CZArYBRJLSakW4UXXCwBTRQ2lRug%3Fe%3DYiLIxG)\n作者简介\n[王剑锋](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=2&q=%E7%8E%8B%E5%89%91%E9%94%8B&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnjovliZHplIsiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MiwiemRfdG9rZW4iOm51bGx9.vBAOtAJHF0JfLrjNQ8kcFw0w2zh559KPmVhAT4qTqfQ&zhida_source=entity)，北京航空航天大学软件学院硕士，旷视科技研究院[算法研究员](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E7%AE%97%E6%B3%95%E7%A0%94%E7%A9%B6%E5%91%98&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLnrpfms5XnoJTnqbblkZgiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.Ik0drUBvTFOhGTRGDfXXCJ4LNMoaM9a9Fxm5tI3ANpg&zhida_source=entity)，研究方向人脸检测、通用物体检测等；[人脸检测算法](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=%E4%BA%BA%E8%84%B8%E6%A3%80%E6%B5%8B%E7%AE%97%E6%B3%95&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiLkurrohLjmo4DmtYvnrpfms5UiLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.9mlAWDCX3Y_jrUVrlwEn0i2GgrrcFBTJiKoS3WgVwWQ&zhida_source=entity) SFace 和 FAN 一作；2018 年参加计算机视觉顶会 ECCV 挑战赛 WIDER Challenge 获得人脸检测（Face Detection）冠军。\n参考文献：\n[1] Hao Z, Liu Y, Qin H, et al. Scale-Aware Face Detection[C]//[Proceedings of the IEEE](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Proceedings+of+the+IEEE&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQcm9jZWVkaW5ncyBvZiB0aGUgSUVFRSIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.HzBJTTVy-j0dpKUG1AdM8Z1VR7lc2Yazqq1Sa_dtxG8&zhida_source=entity) Conference on Computer Vision and [Pattern Recognition](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Pattern+Recognition&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJQYXR0ZXJuIFJlY29nbml0aW9uIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.E02KC9OoRsMpdMmWKtRRZxt19s7V6qJIlhKalwPo8Io&zhida_source=entity). 2017: 6186-6195.\n[2] Liu Y, Li H, Yan J, et al. Recurrent Scale Approximation for Object Detection in CNN[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2017: 571-579.\n[3] Yang S, Xiong Y, Loy C C, et al. Face Detection through Scale-Friendly Deep Convolutional Networks[J]. arXiv preprint arXiv:1706.02863, 2017.\n[4] Zhu C, Zheng Y, Luu K, et al. CMS-RCNN: contextual multi-scale region-based CNN for unconstrained [face detection](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=face+detection&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJmYWNlIGRldGVjdGlvbiIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.3tS4GVxkxpUIBIRWsudG0fQOZdaBm8rFZ0BUYeqLJFc&zhida_source=entity)[M]//Deep Learning for [Biometrics](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=Biometrics&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJCaW9tZXRyaWNzIiwiemhpZGFfc291cmNlIjoiZW50aXR5IiwiY29udGVudF9pZCI6MTAwNzEyMDEyLCJjb250ZW50X3R5cGUiOiJBcnRpY2xlIiwibWF0Y2hfb3JkZXIiOjEsInpkX3Rva2VuIjpudWxsfQ.Ov-X0IX1Um_S-_GwhgaiPCPbu5fvtQbAKPfBHFh7tY4&zhida_source=entity). Springer, Cham, 2017: 57-79.\n[5] Opitz M, Waltner G, Poier G, et al. Grid loss: Detecting occluded faces[C]//European conference on [computer vision](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=computer+vision&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJjb21wdXRlciB2aXNpb24iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.qFSLRRMr9nrwOwCuqvn9kiBUd6wHhZbLe0tNxMOAyvE&zhida_source=entity). Springer, Cham, 2016: 386-402.\n[6] Chen Y, Song L, He R. Adversarial Occlusion-aware Face Detection[J]. arXiv preprint arXiv:1709.05188, 2017.\n[7] Ge S, Li J, Ye Q, et al. Detecting Masked Faces in the Wild With LLE-CNNs[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2017: 2682-2690.\n[8] Liu W, Anguelov D, Erhan D, et al. Ssd: Single shot multibox detector[C]//European conference on computer vision. Springer, Cham, 2016: 21-37.\n[9] Lin T Y, Goyal P, Girshick R, et al. Focal Loss for Dense Object Detection[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 2980-2988.\n[10] Huang L, Yang Y, Deng Y, et al. Densebox: Unifying [landmark](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=landmark&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJsYW5kbWFyayIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.rJJZ3ol_3lkumMjBXWh93qiBC5DdtkFo_d4EDsTAQIc&zhida_source=entity) localization with end to end object detection[J]. arXiv preprint arXiv:1509.04874, 2015.\n[11] Yu J, Jiang Y, Wang Z, et al. Unitbox: An advanced object detection network[C]//Proceedings of the 2016 [ACM](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=ACM&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJBQ00iLCJ6aGlkYV9zb3VyY2UiOiJlbnRpdHkiLCJjb250ZW50X2lkIjoxMDA3MTIwMTIsImNvbnRlbnRfdHlwZSI6IkFydGljbGUiLCJtYXRjaF9vcmRlciI6MSwiemRfdG9rZW4iOm51bGx9.2EHRVWPtNDH-NJPZt2a3g2z4M9Wjbu1OTJI7VDBNKSE&zhida_source=entity) on Multimedia Conference. ACM, 2016: 516-520.\n[12] Cai Z, Vasconcelos N. Cascade [r-cnn](https://zhida.zhihu.com/search?content_id=100712012&content_type=Article&match_order=1&q=r-cnn&zd_token=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJ6aGlkYV9zZXJ2ZXIiLCJleHAiOjE3OTExMzk0ODYsInEiOiJyLWNubiIsInpoaWRhX3NvdXJjZSI6ImVudGl0eSIsImNvbnRlbnRfaWQiOjEwMDcxMjAxMiwiY29udGVudF90eXBlIjoiQXJ0aWNsZSIsIm1hdGNoX29yZGVyIjoxLCJ6ZF90b2tlbiI6bnVsbH0.RfOc_1dyXjN9xRc924u1X9a9tKbDh062G3bh0COajz0&zhida_source=entity): Delving into high quality object detection[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2018: 6154-6162.\n[13] Chen X, Yu J, Kong S, et al. Towards Real-Time Accurate Object Detection in Both Images and Videos Based on Dual Refinement[J]. arXiv preprint arXiv:1807.08638, 2018.\n[14] Wang J, Chen K, Yang S, et al. Region proposal by guided anchoring[J]. arXiv preprint arXiv:1901.03278, 2019.\n[15] Kong T, Sun F, Liu H, et al. Consistent Optimization for Single-Shot Object Detection[J]. arXiv preprint arXiv:1901.06563, 2019.\n编辑于 2019-02-26 02:24\n[深度学习（Deep Learning）](https://www.zhihu.com/topic/19813032)\n[计算机视觉](https://www.zhihu.com/topic/19590195)\n[目标检测](https://www.zhihu.com/topic/19596960)\n​赞同 416​​55 条评论​783 ​6 \n​分享\n​申请转载​\n​\n![](https://pic1.zhimg.com/v2-d41c2ceaed8f51999522f903672a521f_l.jpeg)\n未登录用户\n \n\n55 条评论\n默认\n最新\n[![王剑锋](https://pic1.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\n好问题。包括，因为gt没有办法把遮挡区域分割出来。这里其实有一个（也许不太科学的）假设就是，我给一个带噪声的标注，它也能学个大概出来。被遮挡部分在整个数据集中的占比应该比较小，这样影响就会比较小。模型最后学出来的实际可视化效果，有点像学习了肤色的区域。\n2019-07-18\n​回复​3\n[![lovesnowbest](https://picx.zhimg.com/v2-c8d7ec0b3b949f6a1815b007d75c4580_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/a4586d51bd39153823dae6f522c774cb)\n[lovesnowbest](https://www.zhihu.com/people/a4586d51bd39153823dae6f522c774cb)\nhi 有个问题想请教一下 你在文中提到widerface官网已经更新了label文件 与widerface challenge保持一致 是指这个网站吗[WIDER FACE: A Face Detection Benchmark](http://link.zhihu.com/?target=http%3A//shuoyang1213.me/WIDERFACE/) 我瞅了一下好像没看到news里面写他们更新了label文件？最近一次更新是2017-3，想确认一下 感谢大佬！\n2020-10-30\n​回复​喜欢\n[![王剑锋](https://pic1.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\nnews似乎是没更新，但文件和初版确实不同。不用纠结这个。\n2020-10-30\n​回复​喜欢\n展开其他 1 条回复​\n[![amos pang](https://pic1.zhimg.com/f33286c60_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/6be77af3a2692e0d04f36080559a4440)\n[amos pang](https://www.zhihu.com/people/6be77af3a2692e0d04f36080559a4440)\n回归的边界框和 ground truth 边界框之间的 IoU 当作 Classfication Subnet 的ground truth这不就是yolo的做法吗\n2019-12-13\n​回复​喜欢\n[![王剑锋](https://pic1.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\nyolo的确是这么做的，出iou这个想法本身是trivial的；但iou并没那么容易学也没那么容易用。\n2019-12-13\n​回复​喜欢\n展开其他 1 条回复​\n[![茄子炒苹果](https://pica.zhimg.com/v2-a089eca759dcbf50b2013a4124dd4514_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/f9d59221c7efbec29fe78ffeba104fee)\n[茄子炒苹果](https://www.zhihu.com/people/f9d59221c7efbec29fe78ffeba104fee)\n您好,非常好的工作!看到\"随着 IoU 逐渐提升，每个 Stage 的 IoU threshold 也逐渐增大\",请问对于每个stage的reg层,使用的anchor一样,backbone的feature一样,GT_box也一样,为什么往后每个stage的iou会逐渐提升?这里面cls层和reg层应该是解耦的把?\n2019-11-13\n​回复​喜欢\n[![清风醉](https://picx.zhimg.com/v2-c6352040fe4e929cbdf1a48cd70d7111_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/1ab146c808f7a30eb528b8f21cffc1cf)\n[清风醉](https://www.zhihu.com/people/1ab146c808f7a30eb528b8f21cffc1cf)\n有没有单独对儿童的脸做检测的研究？在一幅图片中判断检测出是儿童还是成人？\n2019-10-02\n​回复​喜欢\n[![王剑锋](https://pica.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\n确实有年龄检测这个小方向。\n2019-10-02\n​回复​喜欢\n[![深几](https://picx.zhimg.com/v2-abed1a8c04700ba7d72b45195223e0ff_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n[深几](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n强! 这个假设的提出真的是厉害\n2019-07-18\n​回复​喜欢\n[![深几](https://picx.zhimg.com/v2-abed1a8c04700ba7d72b45195223e0ff_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n[深几](https://www.zhihu.com/people/d1fdbf8ee7db546573871464515bfcbd)\n请问一下,fan中attention map的label是根据ground truth，ground truth的矩形框是否包含遮挡区域呢，如果包含遮挡区域，那么遮挡区域和非遮挡区域都设置为１，即需要高亮，那么这部分遮挡区域不是仍然对检测有害吗？(FPN论文表述：Considering the example with \noccluded face, most invisible parts are not useful and may \nbe harmful for detection. Some of the attention results can \nbe found in Figure 5. Our attention mask can enhance the \nfeature maps in the facial area, and diminish the opposition)\n2019-07-18\n​回复​喜欢\n[![Havanaonana](https://picx.zhimg.com/v2-e08166f47b11d6c1a4228e5c595ce46e_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/04d842e77b2e4d86fa02b80d93944dbd)\n[Havanaonana](https://www.zhihu.com/people/04d842e77b2e4d86fa02b80d93944dbd)\n看了文章的实验，想请教一个问题。文章中表3只加anchor-based的时候，在wider face上hard set子集（73.7%)的AP比easy set(43.5%)和medium set(64.4%)都要高？正常情况下hard子集小脸多，ap应该是最低的，这里用了什么trick吗？\n2019-05-21\n​回复​喜欢\n[![王剑锋](https://pic1.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\n没有，sface中anchor-based分支只做小脸，所以这里的对照组，anchor setting是倾向于小脸的，hard set大部分是小脸。\n2019-05-21\n​回复​喜欢\n[![王剑锋](https://pica.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n[王剑锋](https://www.zhihu.com/people/81e52da0a8189e95f7106160d7e8633e)\n作者​![](https://picx.zhimg.com/v2-2ddc5cc683982648f6f123616fb4ec09_l.png?source=32738c0c)\n1. 训练不是单纯resize，是crop之后再resize。2. 全卷积网络本来就支持变长图片输入，直接送完整的原图进网络。\n2019-05-14\n​回复​喜欢\n[![恒少](https://picx.zhimg.com/v2-195ecd05b9d54aef34862c062250e935_l.jpg?source=06d4cd63)](https://www.zhihu.com/people/c8ca0b228fdfcd92189f4cbc1767209d)\n[恒少](https://www.zhihu.com/people/c8ca0b228fdfcd92189f4cbc1767209d)\n看了一下sface的论文，训练是resize到600*600，没太理解测试时4kface用原图是什么意思，是resize到600*600，还是在原图上滑动检测？\n2019-05-14\n​回复​喜欢\n点击查看全部评论\n![](https://pic1.zhimg.com/v2-d41c2ceaed8f51999522f903672a521f_l.jpeg)\n未登录用户\n \n\n关于作者\n[![王剑锋](https://picx.zhimg.com/v2-a59b62740942e5afde371b075e0236fe_l.jpg?source=32738c0c&needBackground=1)](https://www.zhihu.com/people/wjfwzzc)\n[王剑锋](https://www.zhihu.com/people/wjfwzzc)\n人类的悲欢并不相通。\n[​](https://zhuanlan.zhihu.com/p/96956163)\n北京航空航天大学 软件工程硕士\n[ 回答 **55** ](https://www.zhihu.com/people/wjfwzzc/answers)[ 文章 **3** ](https://www.zhihu.com/people/wjfwzzc/posts)[ 关注者 **46,493** ](https://www.zhihu.com/people/wjfwzzc/followers)\n​关注他​发私信\n大家都在搜\n换一换\n[江歌妈妈发长文尘埃终将落定704 万](https://www.zhihu.com/search?q=%E6%B1%9F%E6%AD%8C%E5%A6%88%E5%A6%88%E5%8F%91%E9%95%BF%E6%96%87%E5%B0%98%E5%9F%83%E7%BB%88%E5%B0%86%E8%90%BD%E5%AE%9A&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[中国男足 0-5 巴勒斯坦562 万](https://www.zhihu.com/search?q=%E4%B8%AD%E5%9B%BD%E7%94%B7%E8%B6%B3+0-5+%E5%B7%B4%E5%8B%92%E6%96%AF%E5%9D%A6&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[原央视主持人阿丘回应被通报419 万](https://www.zhihu.com/search?q=%E5%8E%9F%E5%A4%AE%E8%A7%86%E4%B8%BB%E6%8C%81%E4%BA%BA%E9%98%BF%E4%B8%98%E5%9B%9E%E5%BA%94%E8%A2%AB%E9%80%9A%E6%8A%A5&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[华为与赛力斯达成新五年合作409 万](https://www.zhihu.com/search?q=%E5%8D%8E%E4%B8%BA%E4%B8%8E%E8%B5%9B%E5%8A%9B%E6%96%AF%E8%BE%BE%E6%88%90%E6%96%B0%E4%BA%94%E5%B9%B4%E5%90%88%E4%BD%9C&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[迪拜航空确认航班发生事故398 万](https://www.zhihu.com/search?q=%E8%BF%AA%E6%8B%9C%E8%88%AA%E7%A9%BA%E7%A1%AE%E8%AE%A4%E8%88%AA%E7%8F%AD%E5%8F%91%E7%94%9F%E4%BA%8B%E6%95%85&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[东航回应网传空姐跪地道歉326 万](https://www.zhihu.com/search?q=%E4%B8%9C%E8%88%AA%E5%9B%9E%E5%BA%94%E7%BD%91%E4%BC%A0%E7%A9%BA%E5%A7%90%E8%B7%AA%E5%9C%B0%E9%81%93%E6%AD%89&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[王楚钦：不知道为什么就是感觉累320 万](https://www.zhihu.com/search?q=%E7%8E%8B%E6%A5%9A%E9%92%A6%EF%BC%9A%E4%B8%8D%E7%9F%A5%E9%81%93%E4%B8%BA%E4%BB%80%E4%B9%88%E5%B0%B1%E6%98%AF%E6%84%9F%E8%A7%89%E7%B4%AF&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)热\n[江苏高考作文《衬衫的价格为 9 磅 15 便士》爆火268 万](https://www.zhihu.com/search?q=%E6%B1%9F%E8%8B%8F%E9%AB%98%E8%80%83%E4%BD%9C%E6%96%87%E3%80%8A%E8%A1%AC%E8%A1%AB%E7%9A%84%E4%BB%B7%E6%A0%BC%E4%B8%BA+9+%E7%A3%85+15+%E4%BE%BF%E5%A3%AB%E3%80%8B%E7%88%86%E7%81%AB&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[女装网店开始用防拆带了265 万](https://www.zhihu.com/search?q=%E5%A5%B3%E8%A3%85%E7%BD%91%E5%BA%97%E5%BC%80%E5%A7%8B%E7%94%A8%E9%98%B2%E6%8B%86%E5%B8%A6%E4%BA%86&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n[孕妇骑车别车被司机踹翻257 万](https://www.zhihu.com/search?q=%E5%AD%95%E5%A6%87%E9%AA%91%E8%BD%A6%E5%88%AB%E8%BD%A6%E8%A2%AB%E5%8F%B8%E6%9C%BA%E8%B8%B9%E7%BF%BB&search_source=Trending&utm_content=search_hot&utm_medium=organic&utm_source=zhihu&type=content&request_click_id=f39fb64f-3232-4978-8a08-40f2a0a9f5bd)\n### 推荐阅读\n[ ![人脸检测与深度学习](https://picx.zhimg.com/v2-53f857ef881d0b218a8ec725ef91fbe8_250x0.jpg?source=172ae18b)人脸检测与深度学习 岑雨 ](https://zhuanlan.zhihu.com/p/25335957)# [人脸检测 MTCNN 简介 人脸检测 MTCNN 简介1 简介 论文：Joint Face Detection and Alignment using Multi-task Cascaded Convolutional Networks 下载：https://arxiv.org/abs/1604.02878 代码：https://github.… 我不爱机器...发表于模型复现 ](https://zhuanlan.zhihu.com/p/493521967)# [人脸检测与识别年度进展概述 深度学习大讲堂致力于推送人工智能，深度学习方面的最新技术，产品以及活动。请关注我们的知乎专栏！ 编者按：这是一个看脸的世界，尤其在这个刷脸就能够影响银行卡余额的时代，如何准确地… 程程发表于深度学习大... ](https://zhuanlan.zhihu.com/p/27638463)[ ![传统人脸检测识别的简述总结及现今流行框架](https://picx.zhimg.com/v2-eb09cd908e7202b74debaccc06f2b976_250x0.jpg?source=172ae18b)传统人脸检测识别的简述总结及现今流行框架 计算机视觉...发表于计算机视觉... ](https://zhuanlan.zhihu.com/p/27225024) \n\n_想来知乎工作？请发送邮件到 jobs@zhihu.com_\n打开知乎App\n在「我的页」右上角打开扫一扫\n![](https://picx.zhimg.com/v2-9e41ea16bdfbe9cf4896617ecad5b4ca.png)\n其他扫码方式：微信\n下载知乎App\n无障碍模式\n验证码登录\n密码登录\n[开通机构号](https://zhuanlan.zhihu.com/org/signup)\n中国 +86\n获取短信验证码\n忘记密码\n登录/注册\n其他方式登录\n未注册手机验证后自动登录，注册即代表同意[《知乎协议》](https://www.zhihu.com/term/zhihu-terms)[《隐私保护指引》](https://www.zhihu.com/term/privacy)\n扫码下载知乎 App\n关闭二维码\n", "body_base_path": "attachments/60c477d6e9b2/pages/", "body_markdown_path": "attachments/60c477d6e9b2/pages/archived-body.md", "local_html": "attachments/60c477d6e9b2/pages/archived-body.html", "body_source": "prior_capture" }