2020年8月11日
Scrapy之数据解析与数据持久化存储
摘要： JS反混淆：将js混淆的密文以原文的形式展示。推荐的解密网址：http://www.bm8.com.cn/jsConfusion/通过python调用js的相关代码： PyExecJS：可以让python对js代码进行模拟运行。环境的安装： pip install PyExecJS -i https 阅读全文
posted @ 2020-08-11 21:56 虫萧 阅读(480) 评论(0) 推荐(0) 编辑
进程、虚拟环境、mysql
摘要： ICMP协议 > ping使用的 查看进程 ps ps [options] 支持的命令格式 unix格式，如：-h -e BSD格式，如：a，x，u GNU长格式，如： --help 选项 #psPID TTY TIME CMD28019 pts/4 00:00:00 ps83674 pts/4 0 阅读全文
posted @ 2020-08-11 13:14 虫萧 阅读(123) 评论(0) 推荐(0) 编辑
单线程+多任务异步协程、浏览器自动化
摘要： # 梨视频数据的爬取import requestsfrom lxml import etreeimport reheaders = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, 阅读全文
posted @ 2020-08-11 00:08 虫萧 阅读(176) 评论(0) 推荐(0) 编辑