12 2018 档案

摘要:1.PhantomJS其实就是一个没有界面的浏览器,最主要的功能是能够读取js加载的页面。 2.安装PhantomJS。在官网上下载http://phantomjs.org/download.html,根据自己系统的不同选择对应的版本。下载完之后解压到你存放软件的位置,并配置环境变量。 3.根据Ph 阅读全文
posted @ 2018-12-24 14:29 _yj 阅读(1509) 评论(0) 推荐(0)
摘要:1.导入需要的模块requests,BeautifulSoup,os(用于文件读写)。 2.创建一个类,并初始化。 3.先请求图片所在的网页,返回网页response 调用request方法,print(r.text)就可以看到控制台上print出的网页源码了。 4.通过BeautifulSoup工 阅读全文
posted @ 2018-12-24 10:45 _yj 阅读(13508) 评论(0) 推荐(1)
摘要:1.首先,下载需要的模块requests, BeautifulSoup, datetime, pymysql(注意,因为我用的python3.7,不支持mysqldb了),具体的下载方法有pip下载,或者使用Anaconda版本python的童鞋可以使用conda下载。 2.创建conndb,py, 阅读全文
posted @ 2018-12-21 15:34 _yj 阅读(23466) 评论(9) 推荐(1)