青春叛逆者

2019年1月15日

摘要： #url初始化 from pyquery import PyQuery as pq doc = pq(url='http://www.taobao.com') print(doc('head')) ''' 输出结果：淘宝网 - 淘！我喜欢 ''' 阅读全文

posted @ 2019-01-15 16:21 青春叛逆者阅读(254) 评论(0) 推荐(0) 编辑

pyquery 爬虫神器入门教程

摘要： '' 拿出html里面的所有li ''' html = ''' first item second item third item fourth item fifth item ''' from pyquery import PyQuery as pq doc = pq(html... 阅读全文

posted @ 2019-01-15 16:18 青春叛逆者阅读(187) 评论(0) 推荐(0) 编辑

2019年1月14日

矩阵反向生成

摘要： import numpy as np import pandas as pd recommond_matrix=np.zeros((3,4)) headers=['用户','食物','评分'] df_rate=pd.read_csv('rate.csv',sep='\s',names=headers) print(df_rate) print('**********************... 阅读全文

posted @ 2019-01-14 16:44 青春叛逆者阅读(278) 评论(0) 推荐(0) 编辑

2019年1月12日

装饰器

摘要： def zhuangshiqi(func): def wrapper(): print('开始装饰') func() print('装饰结束') return wrapper 闭包的进阶运用 @zhuangshiqi # 相当于执行了：test = zhuangshiqi(test) def test(): print(... 阅读全文

posted @ 2019-01-12 21:39 青春叛逆者阅读(94) 评论(0) 推荐(0) 编辑

闭包入门

摘要： #闭包 # def wai(): # def nei(): # print('内部函数') # # 返回内部函数 # return nei # # # f1 = wai() # f1() def wai(n): # 定义内部函数 def nei(): # 内部函数中使用外部函数的局部变量 # print(... 阅读全文

posted @ 2019-01-12 21:33 青春叛逆者阅读(97) 评论(0) 推荐(0) 编辑

匿名函数

摘要： # # if True: # # name='xiaoming' # # print(name) # #没有块级作用域 # # def test(): # # a=10 # # test() # # print(a) # # 局部变量：在函数内部定义的变量，只能在函数内部使用 # # print(a) # # 全局变量：定义在函数外部的变量，拥有全局的作用 # # # #num全... 阅读全文

posted @ 2019-01-12 21:25 青春叛逆者阅读(140) 评论(0) 推荐(0) 编辑

函数作用域

摘要： # if True: # name='xiaoming' # print(name) #没有块级作用域 # def test(): # a=10 # test() # print(a) # 局部变量：在函数内部定义的变量，只能在函数内部使用 # print(a) # 全局变量：定义在函数外部的变量，拥有全局的作用 #num全局变量 # num = 10 # def show(... 阅读全文

posted @ 2019-01-12 21:00 青春叛逆者阅读(122) 评论(0) 推荐(0) 编辑

分布式爬虫 redis + mongodb +scrapy

摘要： zhihuspider.py # -*- coding: utf-8 -*- import json import scrapy from scrapy import Request from zhihuuser.items import ZhihuuserItem class ZhihuspiderSpider(scrapy.Spider): name = 'zh' ... 阅读全文

posted @ 2019-01-12 20:18 青春叛逆者阅读(946) 评论(1) 推荐(0) 编辑

2019年1月11日

可配置智联爬虫

摘要： settings.py # -*- coding: utf-8 -*- # Scrapy settings for review_spider project # # For simplicity, this file contains only settings considered important or # commonly used. You can find more se... 阅读全文

posted @ 2019-01-11 22:40 青春叛逆者阅读(292) 评论(0) 推荐(0) 编辑

阿里云服务器可视化

摘要： ### 阿里云ECS，Ubuntu Server 16.04安装图形界面远程控制 - ##### 下面教你怎么安装一个超级高效的图形界面**xfce**。 - **首先要连接上你的服务器**，然后安装vncserver，这个是用来远程连接用的。命令如下 - **安装图形界面** # 如果安装不上，就阅读全文

posted @ 2019-01-11 22:15 青春叛逆者阅读(2738) 评论(0) 推荐(1) 编辑

公告