Python采集主播照片,实现人脸识别, 进行颜值评分,制作颜值排行榜

昨晚一回家,表弟就神神秘秘的跟我说,发现一个高颜值网站,非要拉着我研究一下她们的颜值高低。

我心想,这还得要我一个个慢慢看,太麻烦了~

于是反手用Python给他写了一个人脸识别代码,把她们的照片全部爬下来,自动检测颜值打分排名。

这不比手动快多了?

准备工作

开发环境

  • Python 3.8
  • Pycharm

模块使用

  • requests >>> pip install requests
  • tqdm >>> pip install tqdm 简单实现进度条效果
  • os 文件操作
  • base64

照片采集部分

流程思路

  1. 明确需求:
    分析 主播照片 能够去哪里获取到 <开发者工具抓包分析图片数据来源>
    • 打开开发者工具: F12
    • 刷新网页
    • 点击 Img 查看图片链接地址
    • 通过关键字去搜索图片所对应的数据包
  2. 在这个链接里面就有想要图片数据内容
    • 发送请求, 模拟浏览器对于url地址发送请求
    • 获取数据, 获取服务器返回响应数据
    • 解析数据, 提取我们想要的内容 图片url 和 主播名字
    • 保存数据, 把图片数据内容保存本地文件夹里面

代码展示

# 导入数据请求模块
import requests
"""
发送请求, 模拟浏览器对于url地址发送请求
"""
# 模拟浏览器  headers 请求头 --> 字典数据类型, 构建完整键值对
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36'
}
# 请求链接
url = 'https://www.huya.com/cache.php?m=LiveList&do=getLiveListByPage&gameId=1663&tagAll=0&page=2'
# 发送请求
# 调用requests模块里面get请求方法, 对于url地址发送请求并且携带上headers请求头伪装, 最后用response变量接受返回数据
response = requests.get(url=url, headers=headers)
# <Response [200]> 响应对象, 200状态码表示请求成功
print(response)
"""
- 获取数据, 获取服务器返回响应数据
    response.text 获取响应文本数据 <字符串数据>
    response.json() 获取响应json字典数据 <字典数据>

- 解析数据, 提取我们想要的内容 图片url 和 主播名字
    解析数据方法选择, 是根据返回数据内容来的
        键值对取值 <字典取值>
"""
# for循环遍历提取内容
for index in response.json()['data']['datas']:
    # 照片
    img = index['screenshot']
    # 名字
    name = index['nick']
    """
    保存数据
    """
    content = requests.get(url=img, headers=headers).content
    with open('img\\' + name + '.jpg', mode='wb') as f:
        f.write(content)
    print(name, img)

采集到的照片

评分排名部分

对于照片内容进行人脸检测, 颜值评分:

  1. 百度云API接口 --> 有现成文档代码
  2. 通过文档提供代码 先获取 access_token

代码部分

import time
# encoding:utf-8
import requests
import base64
from pprint import pprint
import os
from tqdm import tqdm
# 文章不理解的话,我还录制了对应的视频讲解,和代码一起打包好了。
# 都放在这个q裙了:708525271
def Score(file): # client_id 为官网获取的AK, client_secret 为官网获取的SK host = 'https://aip.baidubce.com/oauth/2.0/token?grant_type=client_credentials&client_id=官网获取的AK&client_secret=官网获取的SK' response = requests.get(host) access_token = response.json()['access_token'] ''' 人脸检测与属性分析 ''' # 读取一下图片数据 f = open(file, mode='rb') # 转成 BASE64格式 img_base = base64.b64encode(f.read()) request_url = "https://aip.baidubce.com/rest/2.0/face/v3/detect" params = { # 传入图片BASE64格式 "image":img_base, # 指定图片数据类型 "image_type": "BASE64", # 检测类型 检测颜值评分 "face_field": "beauty" } request_url = request_url + "?access_token=" + access_token headers = {'content-type': 'application/json'} json_data = requests.post(request_url, data=params, headers=headers).json() # KeyError: 'result' 因为识别失败了 try: num = json_data['result']['face_list'][0]['beauty'] # print('颜值分数是:', num) return num except: return '识别失败' lis = [] # 读取文件路径 files = os.listdir('img\\') print('正在颜值检测中, 请稍后......') for file in tqdm(files): time.sleep(0.5) filename = f'img\\{file}' # 主播名字 name = file.split('.')[0] # 评分 num = Score(file=filename) if num != '识别失败': dit = { '主播': name, '颜值': num } lis.append(dit) lis.sort(key=lambda x:x['颜值'], reverse=True) page = 1 for li in lis: print(f'颜值排名第{page}的是{li["主播"]}, 颜值评分是{li["颜值"]}') page += 1

 

效果展示


好了文章内容就分享到这里,下次见~

 

posted @ 2023-07-26 15:34  轻松学Python  阅读(408)  评论(0编辑  收藏  举报