Python中syncio和aiohttp
摘要：CPython 解释器本身就不是线程安全的，因此有全局解释器锁(GIL)，一次只允许使用一个线程执行 Python 字节码。因此，一个 Python 进程通常不能同时使用多个 CPU 核心。然而，标准库中所有执行阻塞型 I/O 操作的函数，在等待操作系统返回结果时都会释放GIL。这意味着在 Pyth
阅读全文
posted @ 2018-10-30 16:14
10 2018 档案
python下的selenium和PhantomJS
摘要：一般我们使用python的第三方库requests及框架scrapy来爬取网上的资源，但是设计javascript渲染的页面却不能抓取，此时，我们使用web自动化测试化工具Selenium+无界面浏览器PhantomJS来抓取javascript渲染的页面， 但是新版本的Selenium不再支持Ph
阅读全文
posted @ 2018-10-26 16:54
AOP - C＃ Fody中的方法和属性拦截
摘要：很久很久以前用过postsharp来做AOP， 大家知道的，现在那东东需要付费，于是尝试了一下Fody，但是发现Fody跟新太快了，所以大家在安装fody的时候尽力安装老的版本：packages.config 创建一个方法拦截的demo如下： 属性拦截如下： 创建FodyWeavers.xml： 调
阅读全文
posted @ 2018-10-25 19:03
Python的ctypes 和pyinstaller
摘要：这几天在学习python的爬虫， 无意中看到一篇博文 Python爬虫之自制英汉字典 发现里面的ctypes 和pyinstaller 还不了解，这边文章说白了就是你输入英文， python读取你的输入 然后发送一个http请求到有道翻译，然后把翻译的结果打印出来，这里使用了ctypes来设置打印窗
阅读全文
posted @ 2018-10-25 16:26
pip安装pycrypto报错：Microsoft Visual C++ 14.0 is required. 和 SSLError: HTTPSConnectionPool的解决办法
摘要：今天本打算把【Python3爬虫】网易云音乐爬虫 的代码敲一遍， 但是在安装pycrypto老是报错， 由于我计算是win10， 并且也有vs2017 python3环境下安装pycrypto的一些问题Python踩坑之路-Python-3.6 安装pycrypto 2.6.1各种疑难杂症及解决方案
阅读全文
posted @ 2018-10-24 16:02
python3 HTTP Error 403:Forbidden
摘要：问题描述初学python，在用python中的urllib.request.urlopen()和urllib.request.urlretrieve方法打开网页时，有些网站会抛出异常: HTTP Error 403:Forbidden 问题原因网站对爬虫的操作进行了限制 解决方法伪装成浏览器， 基础
阅读全文
posted @ 2018-10-24 15:33
我的第一个 react redux demo
摘要：最近学习react redux，先前看过了几本书和一些博客之类的，感觉还不错，比如《深入浅出react和redux》,《React全栈++Redux+Flux+webpack+Babel整合开发》，《React与Redux开发实例精解》， 个人觉得《深入浅出react和redux》这本说讲的面比较全
阅读全文
posted @ 2018-10-05 14:02
