09 2020 档案

摘要:可以动态执行语句 for i in range(len(line)): exec("k{}=sympy.symbols('k{}')".format(i,i)) 阅读全文
posted @ 2020-09-29 11:53 yjy888 阅读(185) 评论(0) 推荐(0) 编辑
摘要:1、安装 pip install beautifulsoup4 2、 from bs4 import BeautifulSoup html = BeautifulSoup(page_source,features='html.parser')这个parser取决于我们要解析哪种网页,比如xml, l 阅读全文
posted @ 2020-09-25 14:16 yjy888 阅读(96) 评论(0) 推荐(0) 编辑
摘要:现在大部分网页内容都是由js动态加载得到,我们如果要使用scrapy静态爬取是爬取不到内容的,所以需要引入js渲染引擎去加载js,也就是splash。 然后还要使用一个包scrapy-splash,这个包调用了splash实例的接口,用来支持scrapy做爬虫。 Scrapy-Splash uses 阅读全文
posted @ 2020-09-23 18:06 yjy888 阅读(327) 评论(0) 推荐(0) 编辑
该文被密码保护。
posted @ 2020-09-11 15:35 yjy888 阅读(0) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示