brady-wang - 博客园

2018年1月20日

摘要： #coding=utf-8 import urllib.request from bs4 import BeautifulSoup from urllib import error import re ls = ['zhenrenxiu','meinv',"lianglichemo",'rentiy 阅读全文

posted @ 2018-01-20 19:28 brady-wang 阅读(23754) 评论(0) 推荐(0) 编辑

Python3网络爬虫(三)：urllib.error异常

摘要：运行平台：Windows Python版本：Python3.x IDE：Sublime text3 转载请注明作者和出处：http://blog.csdn.net/c406495762/article/details/59488464 一.urllib.error urllib.error可以接收有阅读全文

posted @ 2018-01-20 17:49 brady-wang 阅读(492) 评论(0) 推荐(0) 编辑

2018年1月19日

爬取自己博客内容

摘要： #coding=utf-8 from bs4 import BeautifulSoup import urllib.request import re def validateTitle(title): rstr = r"[\/\\\:\*\?\"\\|]" # '/ \ : * ? " |' new_title = re.sub(rstr, "_", title) ... 阅读全文

posted @ 2018-01-19 18:02 brady-wang 阅读(556) 评论(0) 推荐(0) 编辑

python 保存文件时候, 去除名字中的非法字符

摘要： import re def validateTitle(title): rstr = r"[\/\\\:\*\?\"\<\>\|]" # '/ \ : * ? " < > |' new_title = re.sub(rstr, "_", title) # 替换为下划线 return new_titl 阅读全文

posted @ 2018-01-19 17:59 brady-wang 阅读(1118) 评论(0) 推荐(0) 编辑

爬取本blog的所有标题和链接

摘要： #coding=utf-8 from bs4 import BeautifulSoup import urllib.request for i in range(1,54): url = "http://www.cnblogs.com/php-linux/?page="+str(i) res = urllib.request.urlopen(url) soup = B... 阅读全文

posted @ 2018-01-19 17:19 brady-wang 阅读(353) 评论(0) 推荐(0) 编辑

beautifusouptest

摘要： from bs4 import BeautifulSoupimport urllib.requesturl = "http://www.douban.com/tag/%E5%B0%8F%E8%AF%B4/?focus=book"res = urllib.request.urlopen(url)sou 阅读全文

posted @ 2018-01-19 16:48 brady-wang 阅读(275) 评论(0) 推荐(0) 编辑

python3 保存一个网页为html文件

摘要：我使用的python版本为3.5.2. 最近租房子，恨透了中介，想绕过中介去租。结果发现豆瓣同城里有好多二房东，感觉人都还不错。但是豆瓣这里没有信息检索的功能，只能人工地看房子的地址，非常地不方便。所以我想做一个程序，它具有的功能，第一可以获取每条租房信息的房间地址，第二可以计算出该地址与我公司的路阅读全文

posted @ 2018-01-19 15:16 brady-wang 阅读(12092) 评论(0) 推荐(0) 编辑

python-----json

摘要： import urllib.request,json url = r"http://www.tps138.brady2/test/t_amp" data = { 'id': 'true', 'anme': 'Python' } data = urllib.parse.urlencode(data).encode('utf-8'); req = urlli... 阅读全文

posted @ 2018-01-19 14:17 brady-wang 阅读(239) 评论(0) 推荐(0) 编辑

2018年1月18日

Python3学习笔记（urllib模块的使用）

摘要： Python3学习笔记（urllib模块的使用） 1.基本方法 urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None) - url: 需阅读全文

posted @ 2018-01-18 16:18 brady-wang 阅读(298) 评论(0) 推荐(0) 编辑

2018年1月17日

python----1

摘要： ''' 第一个示例：简单的网页爬虫爬取豆瓣首页 ''' import urllib.request #网址 url = "http://www.douban.com/" #请求 request = urllib.request.Request(url) #爬取结果 response = urllib.request.urlopen(request) data = response.... 阅读全文

posted @ 2018-01-17 15:04 brady-wang 阅读(223) 评论(0) 推荐(0) 编辑

风行天下

天地不仁以万物为刍狗

公告