摘要：
from bs4 import BeautifulSoupimport requestsimport random#随机代理获取的网站url = 'http://www.xicidaili.com/nn/'headers = { 'User-Agent': 'Mozilla/5.0 (Windows 阅读全文
摘要：
当爬虫或者数据清洗时，会遇到知道id、class以及name属性 来匹配信息，获取数据的时候。 以下即可，自己自行替换属性以及添加url最后改成符合自己 需求的匹配模板和匹配对象即可。需要注意的一点是，记得查看匹配对象的类型。 html = requests.get(url).texthtml = 阅读全文
摘要：
# 使用timetimeStamp = 1381419600timeArray = time.localtime(timeStamp)otherStyleTime = time.strftime("%Y--%m--%d %H:%M:%S", timeArray)print(otherStyleTim 阅读全文
摘要：
html_data="{"code":0,"data":"<table width='583' style='width: 583px; border-collapse: collapse;' border='0' cellspacing='0' cellpadding='0' x:str=''>< 阅读全文
摘要：
简述上篇问题是continue问影响到外层循环，而不是继续内层循环的下一次循环。 其实当时是陷在那个环节里面了，脑海里老是想着怎么好的使用continue，而解决办法同样的很简单， 不适用continue即可，continue的作用无非是当满足条件的时候，结束当前循环使之代码失效，继续下次循环， 那 阅读全文
摘要：
首先呢，uibot软件是一款非常棒的编写自动化的一款软件，超神奇的五行代码爬取小说，一键进行图片识别等等， 它是类似于一种鼠标的一键宏，更加恰当的理解是按键精灵。但是它最大的特点是无侵入性，可以没有侵入性的 控制浏览器鼠标等等办公工具做一系列的操作，解放人力，毕竟解放生产力才是最主要的嘛，再者也可以 阅读全文
摘要：
一开始查找百度很多方法都不行，，第一次尝试、最有希望和看着像的是：1.win+r --> 输入regedit 打开注册表2.打开目录HKEY_CURRENT_USER\Software\Microsoft\Windows\CurrentVersion\Internet Settings3.删除Int 阅读全文
摘要：
事情发生背景： 题目是：有10万个随机数，请写一段代码，找出前10个最小的。 一开始我想的是直接用python语法糖（列表生成式）生成一个随机的10万个数字。 但是我发现以我目前的能力完成不了，因此我就用了一个列表和一个列表生成式做出了一个伪随机数. import random import hea 阅读全文
摘要：
首先，要了解两者的区别，就要清楚scrapy-redis是如何产生的，有需求才会有发展，社会在日新月异的飞速发展，大量相似网页框架的飞速产生，人们已经不满足于当前爬取网页的速度，因此有了分布式爬虫，让其可以并行的爬取更多但又不尽相同的网页，这样大大节省了之前同步完成页面爬取所浪费的时间，同步与异步的 阅读全文
摘要：
1、函数式编程作为结构化编程的一种，正在受到越来越多的重视。那么什么事函数式编程呢？ 在维基百科中给出了详细的定义，函数式编程又称泛函数编程，是一种编程规范，它将函数运算视为数学上的函数计算。简单的来说就是一步步的执行程序。 2、面向对象编程呢是具有对象概念的程序编程范例，同时也是一种程序开发的方法 阅读全文