posted @ 2017-09-15 20:57 蓝空 阅读(421) 评论(0) 推荐(0) 编辑
摘要:
爬取今日头条关键字搜索街拍import osfrom multiprocessing.pool import Poolimport requestsfrom urllib.parse import urlencodefrom hashlib import md5headers = {... 阅读全文
摘要:
1、multiprocessing.pool函数class multiprocessing.pool.Pool([processes[, initializer[, initargs[, maxtasksperchild[, context]]]]]) 用途:A process p... 阅读全文
posted @ 2017-09-14 15:26 蓝空 阅读(2312) 评论(0) 推荐(0) 编辑
摘要:
import requestsfrom urllib.parse import urlencodefrom pyquery import PyQuery as pqfrom pymongo import MongoClientbase_url = 'https://m.weibo.c... 阅读全文
posted @ 2017-09-13 22:30 蓝空 阅读(261) 评论(0) 推荐(0) 编辑
摘要:
函数:string.join()Python中有join()和os.path.join()两个函数,具体作用如下: join(): 连接字符串数组。将字符串、元组、列表中的元素以指定的字符(分隔符)连接生成一个新的字符串 os.path.join(): 将多个... 阅读全文
posted @ 2017-09-13 22:15 蓝空 阅读(364) 评论(0) 推荐(0) 编辑
摘要:
一、tuple也是一个class,是不可变的list类型,不可以增删改。创建:tup1 = ('physics', 'chemistry', 1997, 2000);tup2 = (1, 2, 3, 4, 5 );tup3 = "a", "b", "c", "d";访问:(与list... 阅读全文
posted @ 2017-09-12 19:42 蓝空 阅读(410) 评论(0) 推荐(0) 编辑
摘要:
1、Python使用MySQL的流程: 2、.启动MySQL服务器:以管理员身份启动“cmd”,输入命令:’net start mysql‘Python中使用MySQL导入方法:import MySQLdb3、.创建Connection Connection:创建了Python客户... 阅读全文
posted @ 2017-09-12 19:34 蓝空 阅读(344) 评论(0) 推荐(0) 编辑
摘要:
import jsonimport requestsfrom requests.exceptions import RequestExceptionimport reimport timedef get_one_page(url): try: response =... 阅读全文
posted @ 2017-09-11 16:55 蓝空 阅读(270) 评论(0) 推荐(0) 编辑
摘要:
XPath 是一门在 XML 文档中查找信息的语言。XPath 用于在 XML 文档中通过元素和属性进行导航。在学习之前应该具备的知识:在您继续学习之前,应该对下面的知识有基本的了解: HTML / XHTML XML / XML 命名空间什么是 XPath?XPath 使用路径表达... 阅读全文
posted @ 2017-09-10 17:53 蓝空 阅读(423) 评论(0) 推荐(0) 编辑
摘要:
前言没有用过的东西,没有深刻理解的东西很难说自己会,而且被别人一问必然破绽百出。虽然之前有接触过python协程的概念,但是只是走马观花,这两天的一次交谈中,别人问到了协程,顿时语塞,死活想不起来曾经看过的东西,之后突然想到了yield,但为时已晚,只能说概念不清,所以本篇先缕缕py... 阅读全文
posted @ 2017-09-09 19:00 蓝空 阅读(344) 评论(0) 推荐(0) 编辑