2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护



听百家之言,集百家智慧,站在巨人肩上攀登


香港的Yuen教授讲解了人脸识别的安全问题以及模板保护。

文章目录

Outline

  1. Background and Motivations
  2. Face Presentation Attack Detection
  3. Face Template Protection (very brief)
  4. Conclusions

What happens if a face recognition system is NOT secure?

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
有很多可以攻击的地方。

part 1: anti-spoofing -> face presentation attack detection

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

  • Jukka Maatta , Abdenour Hadid , Matti Pietikainen , “Face Spoofing Detection From Single Images Using Micro Texture Analysis”, IJCB 2011 基于LBP的

  • Di Wen, Hu Han, Anil K. Jain, “ Face Spoof Detection with Image Distortion Analysis”, TIFS 2015 手机上的,

  • Motion based

  • Eyeblink based anti spoofing in face recognition from a generic web camera
    G.Pan et al., ICCV’07)

  • Real time face detection and motion analysis with application in liveness
    assessment. (K. Kollreider et al., TIFS’07)

  • A liveness detection method for face recognition based on optical flow field (W.
    Bao et al., IASP’09)

  • Face liveness detection using dynamic texture (Pereira et al., JIVP’

  • Detection of face spoofing using visual dynamics (S. Tirunagari et al., TIFS’15

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

Y. Liu, A. Jourabloo , and X. Liu. Face De Spoofing: Anti Spoofing via Noise Modeling, ECCV 2018

Yang X, Luo W, Bao L, et al . Face Anti Spoofing: Model Matters, So Does Data , CVPR 2019

CVPRW2020

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

结构光

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

3D mask attack

这个很具有挑战性

  • 2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
  • 提供一个人脸照片,就可以很简单做3Dmask
  • 特别真实2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

一个真实的例子

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

我去这么厉害的么???????

我们最近的工作

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

只是一个overview,需要的话看详细论文。

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

How to increase the robustness of rPPG based Face Anti spoofing?

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

限制/不足

  • 时间太长了,10秒钟,3秒可不可以啊??好像效果不是很好
  • 所以我们设计了另外一个
  • 2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

做了一个实时系统

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

另外一个工作

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

问一个问题

如果我们不知道攻击类型呢?
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

所以我们设计了domain-generalization

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

meta learning?

第一次meta learning 应用在anti-spoofing

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

Dataset

欢迎下载:
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

Part 2

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护
2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

现在的解决方案

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

我们的工作

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

2021WSB-day4-2:Yuen教授讲解人脸识别的安全问题以及模板保护

conclusion

  • Biometrics security and privacy is an important issue for practical biometrics systems

  • Research work in fake biometrics detection and biometrics template protection are discussed

  • Security like a “cat and mouse” game

  • More and continuous efforts are required

QA

问:Hello professor. Thank you for your presentation. There are some ECG-based authentication methods now. According to your research, can it be a effective way to use rPPG to recognize identity alone or help other features(e.g. face) ?

  • ECG不是很方便啦
  • 人PPG 远距离就可以

问: 未来的FR,安全可信赖么?

  • biometric -> identity science

问: 有使用IR之类的做anti-spoofing

  • 我们使用过NIR啦

问:
hello professor. Thank you for your presentation. I wanna ask question that what is the performance of this algorithm about 3D-mask anti spoofing in the low piexl-level camera like mobile phone camera?

  • 手机很好的啦,相机
  • 最大的挑战是环境

问:Hello professor P.C, thanks so much for the talk. Could you kindly share your thougths on bridge the gap between biometrics and conventional cryptosystem? such as the combination of biometric with symmetric password system or asymmetric cryptosystem?

  • 这个已经有人使用
  • 我大部分是anti-spoofing
  • 我们未来要做,使用deep learning based hashing

问: deep fake?

  • digital manipulation
  • 我没有做过这个,Liu Xiaoming 可能会讲这些。

问: 戴口罩的人,而且又走很快,咋办

  • 这个还真的是困难,如果人走很快的话,就没办法,是个open question

问:make up 怎么区分呀

  • arun ross 有做过一个数据集
上一篇:reactnative安卓真机调试


下一篇:ReactNative阴影