摘要： python2和python3对于url的解码和编码 某天做爬虫时遇到一个post请求的参数是编码过的字符串如下,看不懂,初步判断可能是url编码 对于不了解url编码,解码的同学,我简单解释一下,也可以参考 http://www.w3school.com.cn/tags/html_ref_urle 阅读全文

摘要： 1.原理 深度优先遍历：对每一个可能的分支路径深入到不能再深入为止，而且每个结点只能访问一次。要特别注意的是，二叉树的深度优先遍历比较特殊，可以细分为先序遍历、中序遍历、后序遍历（我们前面使用的是先序遍历）。具体说明如下： 先序遍历：对任一子树，先访问根，然后遍历其左子树，最后遍历其右子树。 中序遍 阅读全文

摘要： 并发：在操作系统中，是指一个时间段中有几个程序都处于已启动运行到运行完毕之间，且这几个程序都是在同一个处理机上运行，但任一个时刻点上只有一个程序在处理机上运行。当有多个线程在操作时,如果系统只有一个CPU,则它根本不可能真正同时进行一个以上的线程，它只能把CPU运行时间划分成若干个时间段,再将时间 阅读全文

摘要： 阻塞非阻塞与同步异步区别 在网络编程中，经常会提到同步/异步，阻塞/非阻塞的概念，记得一开始的时候我总是分不清它们之间有什么区别，所以经常混淆。其实它们之间是有着一层包含与被包含的关系，其中同步包含了阻塞与非阻塞，而异步则是另一种情况。可以划分为三类： 同步阻塞 同步非阻塞 异步 同步阻塞 Linu 阅读全文

摘要： 一.环境安装 pip3 install flask pip3 install gunicorn pip3 install nginx 二.模块介绍 1.Flask是一个使用 Python 编写的轻量级 Web 应用框架 2.gunicorn是一个python Wsgi http server，只支持 阅读全文

摘要： windows下安装: 1.安装Anaconda环境管理工具 也可以使用pip安装,值得注意的是如果你使用的是pip安装，你需要解决相应的包依赖（解决依赖一般会让你怀疑人生、怀疑scrapy，建议还是用Anaconda安装，少年！） Anaconda 下载地址:https://www.anacond 阅读全文

摘要： 1，查看8010端口是否被占用[root@cloud ~]# netstat -an|grep 8010tcp 0 0 0.0.0.0:8010 0.0.0.0:* LISTEN 2，查看8010是被何以程序占用[root@cloud ~]# lsof -i:8010COMMAND PID USER 阅读全文

摘要： 1、查看CPU信息# 总核数 = 物理CPU个数 X 每颗物理CPU的核数 # 总逻辑CPU数 = 物理CPU个数 X 每颗物理CPU的核数 X 超线程数# 查看物理CPU个数cat /proc/cpuinfo| grep "physical id"| sort| uniq| wc -l# 查看每个 阅读全文

摘要： 因为是百度图片是瀑布流ajax异步上传的数据，所以这里用到抓包工具来抓取链接（fiddler） 好了直接上代码， 阅读全文

摘要： 1 import requests 2 from lxml import etree 3 from bs4 import BeautifulSoup 4 import os 5 from selenium import webdriver 6 7 8 9 #解析每个漫画分页并下载漫画 10 def 阅读全文