09 2018 档案
摘要：#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2018/9/26 10:26 # @Author : Sa.Song # @Desc : 抓取崔庆才微博， 模拟ajax请求 # @File : weiBo.py # @Software: PyCharm import requests from urllib....
阅读全文
摘要：首先分清楚nohup与&： &是指在后台运行一般在执行命令后，都会显式的在前台执行，当Ctrl+C后进程回宕掉，但是 在命令后加&,即使Ctrl+C，程序还在进行，但是，当关闭Xshell后，程序就会宕掉。 nohup是指忽略SiGHUP信号，当关掉Xshell后，程序会一直存在，但是当执行Ctrl
阅读全文
摘要：urllib库是python3的内置HTTP请求库。 ython2中urllib分为 urllib2、urllib两个库来发送请求，但是在python3中只有一个urllib库，方便了许多。 urllib库官方文档地址：https://docs.python.org/3/library/urllib
阅读全文
摘要：系统：centos7.4 安装scrapyd：pip isntall scrapyd 因为我腾讯云上是python2与python3并存的 所以我执行的命令是：pip3 isntall scrapyd 安装后新建一个配置文件： sudo mkdir /etc/scrapyd sudo vim /et
阅读全文
摘要：这段时间在做scrapy爬虫，对爬出来的数据基于Django做了统计与可视化，本想部署在腾讯云上玩玩，但是因为以前没有经验遇到了一些问题，在这里记录一下： 首先说下Django的创建与配置： 1. 创建Django项目： 无论想要将项目创建在哪个文件夹下，都只需要cd到制定的文件夹下执行该命令即可：
阅读全文
