摘要: BeautifulSoup很赞的东西 最近出现一个问题:Python 3.3 soup=BeautifulSoup(urllib.request.urlopen(url_path),"html.parser") soup.findAll("a",{"href":re.compile('^http|^ 阅读全文
posted @ 2016-11-19 10:50 伊周 阅读(3720) 评论(0) 推荐(0) 编辑
摘要: 应用背景: phantomjs的一个爬虫,访问https站点,单向认证(只认证服务器身份)的都可以,双向认证(服务器和客户端都需要认证)必须上传本地证书; 开始用一个包含公钥私钥的PEM证书访问,怎么都不行,必须要用拆成两个,把公钥和私钥拆开,用--ssl-certificates-path=<va 阅读全文
posted @ 2016-05-11 11:08 伊周 阅读(989) 评论(0) 推荐(0) 编辑
摘要: 一、设计目的 设计出一个通用的Master-Slave基础框架,然后可以基于这个框架来实现特定的业务需求,比如实现多节点并行计算、分布式处理等。二、设计理念 基于经典的命令模式,Master和Slave之间通过相互发送命令(Command)实现交互,命令是一个抽象的概念,Command可以用来分发任 阅读全文
posted @ 2016-05-03 15:39 伊周 阅读(921) 评论(0) 推荐(0) 编辑
摘要: 1NoSQL简述 CAP(Consistency,Availabiity,Partitiontolerance)理论告诉我们,一个分布式系统不可能满足一致性,可用性和分区容错性这三个需求,最多只能同时满足两个。关系型数据库通过把更新操作写到事务型日志里实现了部分耐用性,但带来的是写性能的下降。Mon 阅读全文
posted @ 2016-05-03 15:25 伊周 阅读(2021) 评论(0) 推荐(0) 编辑
摘要: 开发大型GUI界面程序MFC当仁不让,但如果是开发图形应用程序,并不需要大规模界面控件,没有必要链接庞大的MFC库,直接使用platform sdk会很麻烦,这时ATL中的关于Windows的封装就是最好的选择 ATL的窗口架构是这样的—— 【两个底层封装类】 CWindow 窗口句柄和API封装类 阅读全文
posted @ 2016-03-01 15:18 伊周 阅读(501) 评论(0) 推荐(1) 编辑
摘要: 今天我们来聊一聊Redis集群。先看看集群的特点,我对它的理解是要需要同时满足高可用性以及可扩展性,即任何时候对外的接口都要是基本可用的并具备一定的灾备能力,同时节点的数量能够根据业务量级的大小动态的伸缩。那么我们一般如何实现呢?集群的实现方式说到集群的实现,我会想到两种方式第一种是去中心化的集群整... 阅读全文
posted @ 2015-11-05 14:01 伊周 阅读(469) 评论(0) 推荐(0) 编辑
摘要: 情况1:#ifdef _DEBUGvirtual void AssertValid() const; //assert(断言)valid(有效的,正确的)virtual void Dump(CDumpContext& dc) const; //存储上下文#endif 这两个函数是调试用的,第一个函数... 阅读全文
posted @ 2015-04-19 16:16 伊周 阅读(466) 评论(0) 推荐(0) 编辑
摘要: 一、首先要澄清一下名字的混淆1.SSL(Secure Socket Layer)是Netscape公司设计的主要用于WEB的安全传输协议。这种协议在WEB上获得了广泛的应用。2.IETF将SSL作了标准化,即RFC2246,并将其称为TLS(Transport Layer Security),从技术... 阅读全文
posted @ 2015-04-09 12:45 伊周 阅读(415) 评论(0) 推荐(0) 编辑
摘要: 一、问题的引入——socket的引入是为了解决不同计算机间进程间通信的问题1.socket与进程的关系1).socket与进程间的关系:socket 用来让一个进程和其他的进程互通信息(IPC),而Socket接口是TCP/IP网络的API接口函数。2).进程间通信(本机内)进程间通信(不同计算机... 阅读全文
posted @ 2015-04-08 11:00 伊周 阅读(208) 评论(0) 推荐(0) 编辑
摘要: C++中的const关键字的用法非常灵活,而使用const将大大改善程序的健壮性,本人根据各方面查到的资料进行总结如下,期望对朋友们有所帮助。Const是C++中常用的类型修饰符,常类型是指使用类型修饰符const说明的类型,常类型的变量或对象的值是不能被更新的。一、Const作用如下表所示:No.... 阅读全文
posted @ 2015-03-20 16:02 伊周 阅读(181) 评论(0) 推荐(0) 编辑