2020年8月15日
大众点评 字体爬取
摘要： 通过网站头部的css链接 每次下载不同的woff字体文件，通过TTfont打开对数字进行匹配即可完成对于字体的破解， 有两种方案，一种式直接从response.text 替换其所有含上述字体的字符完成替换后再通过 etree.HTML( ) 打开.text 对象再去完成xpath查询 一种就是直接先 阅读全文
posted @ 2020-08-15 23:10 酸辣土豆皮 阅读(133) 评论(0) 推荐(0) 编辑
Scrapy settings 并发数更改
摘要： CONCURRENT_REQUESTS默认: 16 Scrapy downloader 并发请求(concurrent requests)的最大值。 CONCURRENT_REQUESTS_PER_DOMAIN默认: 8对单个网站进行并发请求的最大值。 CONCURRENT_REQUESTS_PER 阅读全文
posted @ 2020-08-15 22:52 酸辣土豆皮 阅读(800) 评论(0) 推荐(0) 编辑
2020年8月8日
MongoDB使用
摘要： 运行MongoDB 添加系统变量 mongod --dbpath xxxx 路径 连接MongoDB mongo MongoDB基本使用 show dbs # 查看数据库 use 数据库 # 切换数据库 db.dropDatabase() # 删除数据库 show tables/show colle 阅读全文
posted @ 2020-08-08 19:30 酸辣土豆皮 阅读(81) 评论(0) 推荐(0) 编辑
2020年8月5日
seaborn绘图
摘要： 散点图： 1 import seaborn as sns 2 import pandas as pd 3 from matplotlib import pyplot as plt 4 5 file_path = 'iris.csv' 6 iris = pd.read_csv(file_path) 7 阅读全文
posted @ 2020-08-05 20:56 酸辣土豆皮 阅读(124) 评论(0) 推荐(0) 编辑
2020年8月2日
frida对接
摘要： 可以先查看 adb devices adb开启root权限 adb root 将下载的frida-server传入手机 下载链接 adb push D:\js逆向处理\frida-server /data/local/tmp/ adb shell "chmod 755 /data/local/tmp 阅读全文
posted @ 2020-08-02 15:39 酸辣土豆皮 阅读(110) 评论(0) 推荐(0) 编辑
2020年7月30日
扩展ubuntu硬盘！
摘要： 今天安装库直接超了虚拟机的存储量 所以，万能的百度帮助了我Gparted 下载先 sudo apt-get install gparted 这里先右键自己的/dev/sda2 直接编辑大小拉满，这样下面也可以拉满了 阅读全文
posted @ 2020-07-30 20:01 酸辣土豆皮 阅读(80) 评论(0) 推荐(0) 编辑
cv2.minMaxLoc( )
摘要： 返回的值： minVal：最小值 maxVal：最大值 minLoc：最小值的位置 maxLoc：最大值的位置 阅读全文
posted @ 2020-07-30 01:32 酸辣土豆皮 阅读(764) 评论(0) 推荐(0) 编辑
python爬虫记录js方法万用版
摘要： 对于单个节点的隐藏图片或者隐藏的属性可以使用 已用在验证码滑块识别上 1 def execute_js(self, js): 2 """ 3 执行js 4 :param js: str 待执行的js 5 :return: {"type": "xxx", value: "xxx"} 6 """ 7 r 阅读全文
posted @ 2020-07-30 00:20 酸辣土豆皮 阅读(162) 评论(0) 推荐(0) 编辑
cv2.matchTemplate图片匹配
摘要： matchTemplate(image, templ, method, result=None, mask=None)image:表示等待搜索的图像templ：就是需要在image里面找的元素method：计算的匹配方法result：匹配结果图像 如果image=[W,H] templ=[w,h] 阅读全文
posted @ 2020-07-30 00:17 酸辣土豆皮 阅读(751) 评论(0) 推荐(0) 编辑
2020年7月29日
pytorch 安装坑
摘要： https://download.pytorch.org/whl/torch_stable.html 这里直接下换源更快 阅读全文
posted @ 2020-07-29 20:05 酸辣土豆皮 阅读(68) 评论(0) 推荐(0) 编辑