py小蟒蛇

摘要： Redis是业界普遍应用的缓存组件，研究一个组件框架，最直观的办法就是从应用方的角度出发，将每个步骤的考虑一番，从这些步骤入手去研究往往能够最快的体会到一个组件框架的设计哲学。以Redis为例，每当发起一条请求时，redis是如何管理管理网络请求，收到请求后又是通过什么样的数据结构进行组织并操作内存 阅读全文

摘要： 站在网站管理的角度，如果在同一时间段，大家全部利用爬虫程序对自己的网站进行爬取操作，那么这网站服务器能不能承受这种负荷？肯定不能啊，如果严重超负荷则会时服务器宕机（死机）的，对于一些商业型的网站，宕机一秒钟的损失都是不得了的，这不是一个管理员能承担的，对吧？那管理员会网站服务器做什么来优化呢？我想到 阅读全文

摘要： Python web开发中常用的标准库简介 开发过程中，深有体会的一点就是，学习一门编程语言，除了要精通它的语法以外，更需要我们去学习该门语言的标准库。标准库是多年以来，大量开发人员留给我们的宝贵财富，它涵盖了编程中的方方面面。从发送Email到GUI开发，再到内置的Http服务器，一应俱全。 Py 阅读全文

摘要： 收集总结了一下python安全方面的知识点以及近年来的相关漏洞，如果有需要修正或补充的地方，欢迎各位师傅的指出。 常见web漏洞在python中的示例。 xss python下的xss其原理跟php是一样的，django近年的例子如下： CVE-2017-12794,此例中通过抛出异常造成xss。 阅读全文

摘要： 目录 Best Effort 分布式事务解决方案比较 分支事务串并行与LPO 再论TCC 实践案例 references 正文 在前面《从银行转账失败到分布式事务：总结与思考》一文中，已经总结了分布式事务的各种解决方法，以及自己的一点思考。本文算是对上文的一个补充：进一步的思考，主要是这些解决方法在 阅读全文

摘要： Python写爬虫的感觉那叫一个爽！100行代码不到，爬取整站，貌似这样下去拉钩还不加强服务器么？下面看看半智能的效果，下面看图： 输入命令后，小爬虫开始工作了！ 爬去结束后小爬虫自动生成了一个XLS文件，一般的excel就能打开了最后看看成果： 好了，效果看完了，看看小爬虫怎么制造出来的吧。。。其 阅读全文

摘要： AJAX，异步加载技术！！！ 之前在网上看过很多朋友有一种疑问，为什么在看京东网页的源代码里面看不到价格或则折扣一类的数据，而在网页上正常显示却能看到？。。。之前我也没有想到是AJAX，因为我写写爬虫只是业余爱好吧~~，后来有一次用chrome抓包的时候发现网页加载完成但是其还在刷新数据，突然恍然大 阅读全文

摘要： 使用Scrapy趴一趴美女图 Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种 阅读全文

摘要： 混合搜索在各大网站如京东、淘宝都有应用，他们的原理都是什么呢?本博文将为你介绍它们的实现过程。 混合搜索的原理，用一句话来说就是：关键字id进行拼接。 混合搜索示例： 数据库设计： 视频方向： 1 2 3 4 5 6 7 8 9 10 11 12 class Direction(models.Mod 阅读全文

摘要： 对于web开来说，用户登陆、注册、文件上传等是最基础的功能，针对不同的web框架，相关的文章非常多，但搜索之后发现大多都不具有完整性，对于web应用来说，包括数据库的创建，前端页面的开发，以及中间逻辑层的处理三部分。 本操作的环境： deepin linux 2013（基于ubuntu） pytho 阅读全文