81个关键点,帮你紧密追踪女神的脸,比Dlib还多了13点 | 有代码

81个关键点,帮你紧密追踪女神的脸,比Dlib还多了13点 | 有代码

首页动作格斗汽车特技不可能跟踪更新时间:2024-05-11

鬼栗子 发自 凹非寺

量子位 报道 | 公众号 QbitAI

为什么要追踪人脸?

大概,是想要实现什么大胆的想法吧。比如加个贴紧脸部的特技:

△ 来自Face Maker应用

有个叫做Niko的程序猿,发布了拥有81个关键点的面部检测工具:

△ Niko

Niko说,他在Dlib库68个关键点的基础上加了13个,把前额也包含在追踪范围里。

那样,就可以加上更丰富的特技了。比如,带个帽子:

△ 来自Tommy Palladino,并非Niko成果

介绍一下

先来仔细看一看这只斯嘉丽,脸上81个关键点的分布:

0-67是dlib既有的68个脸部关键点;

68-80是程序猿新增的13个前额关键点。

程序猿说,他是从Patrick Huber的eos项目 (一个轻量级3DMM) 上,fork出了一个分支,用Surrey人脸模型找到了自己需要的这13个额外的点。

然后,用整个ibug大数据库训练了模型,拿81点替换了原本的68点。不过,训练方法还是和dlib差不多的。

成果,就是文章开头见到的样子。不过,也可以做成表情包:

Dlib何方神圣?

Dlib,是用C 写成的机器学习库,提供了C 和Python接口。

库里面有许多常见的算法,人脸标记便是赫赫有名的一个。

缘起2014年,Dlib实现了当年一篇著名CVPR论文的算法:

“用回归树,一毫秒搞定人脸对齐。”

由此,Dlib名声大振。人脸标记、人脸识别、人脸姿态估计,库里面各种各样的算法都广为流传。

△ Dlib人脸姿态估计

后来出现的许多库,都是在它的基础上开发的:Python人脸识别库face_recognition便是其一。

Niko的81个关键点,也是借鉴了Dlib人脸标记的68个点。

如今,Dlib已经更新到19.17版本了。

Niko的81点传送门:

https://github.com/codeniko/shape_predictor_81_face_landmarks

Dlib的68点传送门:

http://dlib.net/face_landmark_detection.py.html

Surrey Face Model:

https://cvssp.org/faceweb/3dmm/facemodels/

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI · 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态

查看全文
大家还看了
也许喜欢
更多游戏

Copyright © 2024 妖气游戏网 www.17u1u.com All Rights Reserved