摘要：
json序列化： json的dumps方法可以将json格式数据序列为python的相关数据类型，比如str，常用于打印，另外，在序列化时，中文汉字被转换为unicode编码，在dumps函数中添加参数ensure_ascii=False可解决；dumps的indent参考可以调整显示格式，即缩进， 阅读全文
摘要：
我并非专业DBA,但做为B/S架构的开发人员,总是离不开数据库,一般开发员只会应用SQL的四条经典语句:select ,insert,delete,update。但是我从来没有研究过它们的工作原理,这篇我想说一说select在数据库中的工作原理。B/S架构中最经典的话题无非于三层架构,可以大概分为数 阅读全文
摘要：
除了使用性能测试工具进行性能测试，我们也可以直接用python多线程进行性能测试。 下面，使用这几个模块，对一个查询接口做性能测试： requests：发送http请求 json：返回的字符串转换成json格式 threading：多线程 time：统计时间 具体实现过程见代码及注释。 import 阅读全文
摘要：
xml.dom篇 DOM是Document Object Model的简称，XML 文档的高级树型表示。该模型并非只针对 Python，而是一种普通XML 模型。Python 的 DOM 包是基于 SAX 构建的，并且包括在 Python 2.0 的标准 XML 支持里。 一、xml.dom的简单介 阅读全文
摘要：
下面，通过一个简单的例子，来把多线程和单线程执行任务的耗时做个比较 多线程增加增加：t3线程 单线程增加：movie('少林足球', 2) 结论：多线程，增加线程后，运行时间基本上没变，总耗时还是等于耗时最多的线程所花费的时间；单线程则是线性的增加。另外，多线程的启动时间有极微小差异。 阅读全文
摘要：
Python多线程编程时经常会用到join()和setDaemon()方法，基本用法如下： join([time]): 等待至线程中止。这阻塞调用线程直至线程的join() 方法被调用中止-正常退出或者抛出未处理的异常-或者是可选的超时发生。 setDaemon，将该线程标记为守护线程或用户线程 1 阅读全文
摘要：
实现原理及思路请参考我的另外几篇爬虫实践博客 py3+urllib+bs4+反爬，20+行代码教你爬取豆瓣妹子图：http://www.cnblogs.com/uncleyong/p/6892688.htmlpy3+requests+json+xlwt，爬取拉勾招聘信息：http://www.cnb 阅读全文
摘要：
实现原理及思路请参考我的另外几篇爬虫实践博客 py3+urllib+bs4+反爬，20+行代码教你爬取豆瓣妹子图：http://www.cnblogs.com/uncleyong/p/6892688.htmlpy3+requests+json+xlwt，爬取拉勾招聘信息：http://www.cnb 阅读全文
摘要：
实现原理及思路请参考我的另外几篇爬虫实践博客 py3+urllib+bs4+反爬，20+行代码教你爬取豆瓣妹子图：http://www.cnblogs.com/uncleyong/p/6892688.htmlpy3+requests+json+xlwt，爬取拉勾招聘信息：http://www.cnb 阅读全文
摘要：
在拉勾搜索职位时，通过谷歌F12抓取请求信息 发现请求是一个post请求，参数为： 返回的是json数据 有了上面的基础，我们就可以构造请求了 然后对获取到的响应反序列化，这样就获取到了json格式的招聘信息，就可以进行各种操作了，比如取其中的某个信息 最后循环写入excle 具体实现如下： 阅读全文