Sweety

Practice makes perfect

导航

上一页 1 2 3 4 5 6 7 8 9 10 ··· 62 下一页

2017年10月18日

摘要: Python中有一个被称为属性函数(property)的小概念,它可以做一些有用的事情。在这篇文章中,我们将看到如何能做以下几点:将类方法转换为只读属性 重新实现一个属性的setter和getter方法 在本文中,您将学习如何以几种不同的方式来使用内置的属性函数。希望读到文章的末尾时... 阅读全文

posted @ 2017-10-18 09:57 蓝空 阅读(258) 评论(0) 推荐(0) 编辑

摘要: 前几天意外找到一个简单实用的库- fake-useragent,可以伪装生成headers请求头中的User Agent值。安装pip3 install fake-useragent各浏览器的user-agent值from fake_useragent import UserAgen... 阅读全文

posted @ 2017-10-18 09:44 蓝空 阅读(879) 评论(0) 推荐(0) 编辑

2017年10月16日

摘要: 我的GitHub地址:translations_abou_python 阅读全文

posted @ 2017-10-16 00:58 蓝空 阅读(156) 评论(0) 推荐(0) 编辑

2017年10月15日

摘要: Python确实是我接触过的最高深的一门语言,其实我接触的语言还是挺多的(假装很多。。。),但是像Python这样一个底层的语法让我研究一晚上的还正是没遇到过,对,我搞这个东西用了一个晚上!!! 官方文档太枯燥了。。。 首先这个metaclass是在师兄的代码里面看到的,感觉好强大的... 阅读全文

posted @ 2017-10-15 23:39 蓝空 阅读(234) 评论(0) 推荐(0) 编辑

摘要: 本文为译文,版权属于原作者,在此翻译为中文分享给大家。英文原文地址:Difference between , _ and xx in Python“_”单下划线Python中不存在真正的私有方法。为了实现类似于c + +中私有方法,可以在类的方法或属性前加一个“_”单下划线,意味着该... 阅读全文

posted @ 2017-10-15 14:39 蓝空 阅读(170) 评论(0) 推荐(0) 编辑

2017年10月14日

摘要: 相关介绍淘宝的整个页面数据确实也是通过Ajax获取的,但是这些 Ajax 接口参数比较复杂,可能会包含加密密钥等参数,所以我们如果想自己构造 Ajax 参数是比较困难的,对于这种页面我们最方便快捷的抓取方法就是通过 Selenium,本节我们就来用 Selenium 来模拟浏览器操作... 阅读全文

posted @ 2017-10-14 16:17 蓝空 阅读(379) 评论(0) 推荐(0) 编辑

摘要: Selenium 是一个自动化测试工具,利用它我们可以驱动浏览器执行特定的动作,如点击、下 拉等等操作,同时还可以获取浏览器当前呈现的页面的源代码,做到可见即可爬。对于一些 JavaScript 动态渲染的页面来说,此种抓取方式非常有效 Selenium 是什么?一句话,自动化测试工... 阅读全文

posted @ 2017-10-14 16:08 蓝空 阅读(144) 评论(0) 推荐(0) 编辑

2017年10月13日

摘要: 1、去除字符串首尾空格、回车、 tablestrip() ” xyz “.strip() # returns “xyz” ” xyz “.lstrip() # returns “xyz ” ” ... 阅读全文

posted @ 2017-10-13 17:45 蓝空 阅读(159) 评论(0) 推荐(0) 编辑

摘要: 工具: Python、scrapy、Mongodb背景: 已经在Mongodb里面store了带爬取的链接,需要完善的是对链接字段添加并更新到数据库字段: 简介 introduction 主演 actors 导演 director 编剧 screenwriter 国家 c... 阅读全文

posted @ 2017-10-13 15:09 蓝空 阅读(192) 评论(0) 推荐(0) 编辑

2017年10月12日

摘要: 网上有好多proxy代理,下面的中间件完成scrapy的代理的爬虫demo github链接class ProxyMiddleware(): def __init__(self, proxy_url): self.logger = logging.getLogge... 阅读全文

posted @ 2017-10-12 10:46 蓝空 阅读(124) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 9 10 ··· 62 下一页