爬虫_处理js动态加载
1、selenium模块下载网页提取url,【煎蛋网】
https://www.cnblogs.com/fat39/p/9865949.html#tag5
2、该网页加密了url,通过js获取图片。分析网页,解码出真实url,scrapy下载【煎蛋网】
https://www.cnblogs.com/fat39/p/9865949.html#tag6
分析过程https://blog.csdn.net/van_brilliant/article/details/78723878
3、该网页通过js发送请求,二次获取图片url。通过浏览器审查元素,获取相关交互数据。