摘要：实现LU分解的C语言算法 阅读全文
python3中文字符编码问题
2016-08-18 18:38 by 天马行空的coding, 743 阅读, 0 推荐, 收藏, 编辑
摘要：最近在进行网络爬虫时，被中文的编码问题搞得很头疼，特别是在windows环境下。 1.爬取到的中文网页内容，在解析时出现解析错误 一般情况下，我们都是用urllib中的相关函数，进行web页面的爬取，然后进行相关处理。 但是经常在处理中文web时，对文本内容的处理，经常出现一些编码错误。 为了彻底解 阅读全文
python实现中文图片文字识别--OCR about chinese text--tesseract
2016-08-12 17:27 by 天马行空的coding, 4056 阅读, 0 推荐, 收藏, 编辑
摘要：0.我的环境： win7 32bits python 3.5 pycharm 5.0 1.相关库 安装pillow： pip install pillow 安装tesseract： tesseract-ocr-setup-3.02.02.exe 自带了英文语言包，如果需要中文语言包往下找即可。 或者 阅读全文
编程Tips集锦
2016-08-04 08:31 by 天马行空的coding, 294 阅读, 0 推荐, 收藏, 编辑
摘要：以下是自己编程的一些小贴士，记录，总结提高自己。 1.python中集合类型的查找，尽量用dict or set类型。 dict和set类型，在python内部的实现都是使用hash映射，查找的时间复杂度是O(1)，比任何的查找算法都高效。 当在程序中使用到>1K次的查询，就应该开始考虑使用dict 阅读全文
利用位操作符加速程序的运行
2016-08-03 11:40 by 天马行空的coding, 231 阅读, 0 推荐, 收藏, 编辑
摘要：众所周知，位操作是cpu里面最快速的操作之一。但是以前在程序中，一直没有使用，可能是害怕异或是别的什么原因。可是最近在写一个小的爬虫，但是却需要爬取百万级数据，这时候想到了位操作符。 先来2个程序对比一下： 程序1： Begin: 2016-08-03 10:50:13.694231End: 201 阅读全文
scrapy1.1入门用例简介-2
2016-07-10 17:35 by 天马行空的coding, 203 阅读, 0 推荐, 收藏, 编辑
摘要：写一个小的scrapy project，爬取相关网页内容并保存为.json文件 0.创建project，genspider等。 1.修改items.py，内容如下： 2.修改dmoz.py，内容如下： 3.运行爬虫，结果如下： 已成功爬取到网页内容，并保存为.json格式文件。 阅读全文
the introduction of scrapy1.1 tools
2016-07-05 09:16 by 天马行空的coding, 173 阅读, 0 推荐, 收藏, 编辑
摘要：scrapy xxcommand:输出xxcommand的相关信息 help:scrapy的基本命令，用于查看帮助信息 version：查看版本信息，可见-V参数查看各组件的版本信息； startproject用于新建一个工程 genspider:在工程中产生一个spider，可产生多个spider 阅读全文
scrapy1.1入门用例简介
2016-07-03 23:13 by 天马行空的coding, 972 阅读, 0 推荐, 收藏, 编辑
摘要：今天将scrapy安装成功，测试了下，倒腾了好长时间，才倒腾成功，特此分享。 其实最好的老师就是scrapy的帮助文档，只要把文档看懂，照着做，也就啥都会儿了！ 帮助文档下载见http://download.csdn.net/detail/flyinghorse_2012/9566467 0.新建立 阅读全文
win10 64bit 安装scrapy-1.1
2016-07-03 14:17 by 天马行空的coding, 596 阅读, 0 推荐, 收藏, 编辑
摘要：0.环境说明 win10 64bit，电脑也是64bit的处理器，电脑装有vs2010 64bit，但是为了保险起见，只试验了32位的安装，等有时间了，再试下64位的安装。如无特殊说明，一切操作都是在windows命令行下执行的。电脑也需要联网，因为pip在安装包的时候，需要在线下载相关包。 1.安 阅读全文
关于latex的使用随笔
2016-06-28 15:50 by 天马行空的coding, 309 阅读, 0 推荐, 收藏, 编辑
摘要：用latex写论文过程中，遇到的各种问题随笔解决方案 阅读全文