brady-wang - 博客园

2018年4月23日

摘要： #coding=utf-8 import re from lxml import etree import requests def requests_view(response): import webbrowser requests_url = response.url base_url = '' %(requests_url) base_url = bas... 阅读全文

posted @ 2018-04-23 15:36 brady-wang 阅读(312) 评论(0) 推荐(0) 编辑

python爬虫-使用xpath方法

摘要： #coding=utf-8 import re from lxml import etree import requests response = requests.get("http://yeves.cn/") content = response.content.decode() html = etree.HTML(content) res = html.xpath('/html/bo... 阅读全文

posted @ 2018-04-23 15:15 brady-wang 阅读(309) 评论(0) 推荐(0) 编辑

2018年4月19日

anaconda使用

摘要：查看安装的包 conda list 更新安装包在终端中键入： conda install package_name 例如，要安装 pandas，在终端中输入： conda install pandas 卸载包在终端中键入： conda remove package_names 上面命令中的p 阅读全文

posted @ 2018-04-19 14:43 brady-wang 阅读(412) 评论(0) 推荐(0) 编辑

2018年4月17日

PHP获取网页内容的几种方法

摘要：这里收集了3种利用php获得网页源代码抓取网页内容的方法，我们可以根据实际需要选用。 1、使用file_get_contents获得网页源代码这个方法最常用，只需要两行代码即可，非常简单方便。参考代码： <?php $fh= file_get_contents('http://www.webka 阅读全文

posted @ 2018-04-17 15:01 brady-wang 阅读(26127) 评论(0) 推荐(0) 编辑

python爬虫从入门到放弃（五）之正则的基本使用（转）

摘要：什么是正则表达式正则表达式是对字符串操作的一种逻辑公式，就是事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符”，这个“规则字符” 来表达对字符的一种过滤逻辑。正则并不是python独有的，其他语言也都有正则python中的正则，封装了re模块 python正则的详细讲解常用阅读全文

posted @ 2018-04-17 12:01 brady-wang 阅读(326) 评论(0) 推荐(0) 编辑

python爬虫从入门到放弃（四）之 Requests库的基本使用(转)

摘要：什么是Requests Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议的HTTP库如果你看过上篇文章关于urllib库的使用，你会发现，其实urllib还是非常不方便的，而Requests它会比urllib更加方便，可以节约我们大量的工作阅读全文

posted @ 2018-04-17 11:19 brady-wang 阅读(507) 评论(0) 推荐(0) 编辑

python urllib使用

摘要： Urllib是python内置的HTTP请求库包括以下模块urllib.request 请求模块urllib.error 异常处理模块urllib.parse url解析模块urllib.robotparser robots.txt解析模块 urlopen 关于urllib.request.urlo 阅读全文

posted @ 2018-04-17 10:32 brady-wang 阅读(498) 评论(0) 推荐(0) 编辑

2018年4月16日

curl

摘要： if(!function_exists('s_curl_post2')){ function s_curl_post2($url, $postData) { $dataFormat = ''; foreach($postData as $k=>$v){ $v = @iconv("UTF-8","GBK", $v); ... 阅读全文

posted @ 2018-04-16 10:03 brady-wang 阅读(284) 评论(0) 推荐(0) 编辑

2018年4月14日

Python创建目录文件夹

摘要： Python对文件的操作还算是方便的，只需要包含os模块进来，使用相关函数即可实现目录的创建。主要涉及到三个函数 1、os.path.exists(path) 判断一个目录是否存在 2、os.makedirs(path) 多层创建目录 3、os.mkdir(path) 创建目录 DEMO 直接上代阅读全文

posted @ 2018-04-14 14:20 brady-wang 阅读(1633) 评论(0) 推荐(1) 编辑

2018年4月13日

python3 urllib和requests模块

摘要： urllib模块是python自带的，直接调用就好，用法如下：相比较urllib模块，requests模块要简单很多，具体用法如下：显而易见，requests模块要方便很多，建议大家使用requests模块。阅读全文

posted @ 2018-04-13 09:59 brady-wang 阅读(3410) 评论(0) 推荐(0) 编辑

风行天下

天地不仁以万物为刍狗

公告