Score
0
Watch 12 Star 58 Fork 8

夜半饿得慌 / beautyPythonMulanPSL-2.0

Join us
Explore and code with more than 5 million developers,Free private repositories !:)
Sign up
美丽计划是一款美颜智能应用,目标是提高用户颜值,包括颜值评测,缺陷报告,颜值PK等 spread retract

Clone or download
Cancel
Notice: Creating folder will generate an empty file .keep, because not support in Git
Loading...
readme.md

美丽计划

美丽计划是一款美颜智能应用,目标是提高用户颜值,包括:

颜值评测,颜值报告,改进方案,颜值PK等

目前版本实现了颜值评测(仅适用亚洲女性)

Face Rank Project

颜值评测 检测原理

由于特征较多,使用 MLFeatureSelection 筛选特征

1.人脸轮廓检测

Dlib 人脸关键点检测

2.皮肤检测

deepgaze 皮肤检测

The Histogram Backprojection Algorithm

Human Skin Detection Using RGB, HSV And Ycbcr Color Models

https://arxiv.org/ftp/arxiv/papers/1708/1708.02694.pdf

皮肤颜色的均值、方差等

初期以lbph特征代替,关于lbph的详细说明: Local Binary Patterns Histograms

3.整体特征

尝试使用 keras_vggface:

http://www.robots.ox.ac.uk/~vgg/software/vgg_face/

https://github.com/bknyaz/beauty_vision

运行环境

  • Python 3

使用方法

1.clone整个项目;

git clone https://gitee.com/knifecms/beauty.git

2.安装依赖;

2.1 独立安装:
conda install cmake
conda install nodejs
conda install dlib
2.2 导入conda环境:
conda env create -f face.yaml
默认windows环境
linux环境请使用pip install

3.修改 predict.py 中的图片路径

# 修改为需要预测的美女图片
test = "data/2.jpg"

4.执行预测,即可得到颜值分[0-5],分数越高颜值越高

python predict.py

5.预测结果解释:

python predict_interpret.py

6.执行摄像头下的实时预测

python predict_cam.py

7.运行web预测服务

python predict_server.py
或者启动服务
./restart_server.sh

预览地址:

http://locahost:5000/pred

包含两种解释lime和shap,推荐使用shap的解释

face point

face_reoprt

Questions

1.使用关键点位置判断是否科学?

2.使用人脸变换(face morph)作为美颜目标是否恰当?

3.检测美是否可以反其道行之,用模型检测丑?

Problems

1.颜值解释运行过于缓慢,需要优化

已优化

2.颜值解释说明需要配截图

已优化

3.需要对人脸校正

Todo

1.尝试使用 MediaPipe 捕获摄像头人脸;

2.尝试使用尺度熵+xgb替换CNN;

3.尝试使用 TFQ 加速模型训练过程;

未来计划

1.颜值解释(已添加点位和身体部位对应名称); (使用传统切割手段 和 胶囊图网络Capsule GNN 对比使用 https://github.com/benedekrozemberczki/CapsGNN https://github.com/brjathu/deepcaps )

2.美肤评测(已添加 lbph 特征);

3.使用带语义结构的特征(识别特定皮肤纹理等);

4.使用深度网络对特征进行抽取 (使用autokeras探索SCUT-FBP5500数据集生成模型,仅包含亚洲人和白人);

ak net

5.使用 Electron 构建前端;

参考

https://wenku.baidu.com/view/b10e711ba58da0116c1749e6.html

https://wenku.baidu.com/view/29392bbb9fc3d5bbfd0a79563c1ec5da50e2d6eb.html

https://max.book118.com/html/2017/1115/140076049.shtm

欢迎贡献

欢迎提出宝贵意见及贡献代码

QQ交流群:740807335

开发目录说明:

dl          深度神经网络训练过程
doc         文档
feature     特征处理
landmarks   人脸关键点提取过程
model       模型二进制文件
skin        皮肤特征提取过程
static      flask服务静态文件
template    flask服务模版文件
test        测试目录

Comments ( 4 )

Sign in for post a comment

Python
1
https://gitee.com/knifecms/beauty.git
git@gitee.com:knifecms/beauty.git
knifecms
beauty
beauty
master

Help Search