摘要: 如何获取指定的标签的内容是解析网页爬取数据的必要手段,比如想获取<div class='xxx'> ...<div>这样的div标签,通常有三种办法, 1)用字符串查找方法,然后切分字符串(或切片操作),如str.index(patternStr)或str.find(patternStr),这种方法 阅读全文
posted @ 2016-03-23 16:23 morein2008 阅读(34292) 评论(0) 推荐(2) 编辑
摘要: 利用MBRFix删除ubuntu的开机引导界面,恢复成win7引导之后,为win7添加ubuntu的启动引导项: 直接利用EasyBCD添加一个Grub2的引导项即可 参考:http://mathisonqin.github.io/learning/ubuntu-boot.html 阅读全文
posted @ 2016-03-22 21:19 morein2008 阅读(471) 评论(0) 推荐(0) 编辑
摘要: 按照教程 http://teliute.org/linux/Ubsetup/jichu3/jichu3.html 安装64位ubuntu的时候,因为64位版本的iso安装包里没有vmlinuz文件,而只有vmlinuz.efi, 之前网上的错误做法: 需要到ubuntu官网下载,下载链接为: htt 阅读全文
posted @ 2016-03-22 20:16 morein2008 阅读(186) 评论(0) 推荐(0) 编辑
摘要: 电脑原来是win7系统,后来通过硬盘安装了Ubuntu,同时把Ubuntu设置成了开机引导项(开机时选择操作系统的界面成了紫色背景白色字体的界面),ubuntu引导开机的缺点是将来要卸载Ubuntu时,会进入不了win7。 如何换成原来的黑底白色字体的win7引导?解决方法: 下载MBRFix,把m 阅读全文
posted @ 2016-03-22 14:41 morein2008 阅读(744) 评论(0) 推荐(0) 编辑
摘要: 今天遇到一个正则表达式 regex = '<div class="div_result[\s\S]+?>([\s\S]+)</div>'我原以为将其与网页内容进行匹配之后会获得形如<div class="div_result...</div>这样的完整字符串,但结果只获取了<div></div>之间 阅读全文
posted @ 2016-03-21 21:16 morein2008 阅读(677) 评论(0) 推荐(0) 编辑
摘要: encode是指将unicode字符编码成其他字符集的字符,如utf-8,ascii等; 而decode是指将其他字符编码,如utf-8转换成unicode编码。 encode是指将人类用的语言(字符串)编码为机器能识别的语言(字节码),decode反之。 【简单来说编码就是把人类通用的语言符号翻译 阅读全文
posted @ 2016-03-18 18:08 morein2008 阅读(584) 评论(0) 推荐(0) 编辑
摘要: 如何安装Java,如果出于编程的需要安装Java,需要安装的是JDK,而不仅仅是JRE,下面说说如何在Ubuntu下如何安装JDK:只有两步,1.下载并解压,2.配置环境变量1.下载并解压:下载地址:http://www.oracle.com/technetwork/java/javase/down 阅读全文
posted @ 2016-03-18 17:54 morein2008 阅读(921) 评论(0) 推荐(0) 编辑
摘要: sed的使用方法为: 使用单个模式替换:sed 's/pattern/replacement/flags' filename,例如echo 'abc' | sed 's/a/A/'-->Abc 使用多个模式同时替换:sed 's/pattern1/replacement1/;s/pattern2/r 阅读全文
posted @ 2016-03-16 20:27 morein2008 阅读(20930) 评论(0) 推荐(0) 编辑
摘要: shell实现trim函数效果去除字符串两侧的空格,以下三个命令等价,都能实现 sed 's/^\s*//' totrim.txt |sed 's/\s*$//'>trimed.txt sed 's/^\s*//;s/\s*$//' totrim.txt>trimed.txt sed -e 's/^\s*//' -e 's/\s*$//' totrim.txt>trimed.txt 主要就是利用正则表达式,^\s*表示字符串前面的零个或多个空格,\s*$表示字符串后面的零个或多个空格。 阅读全文
posted @ 2016-03-15 20:04 morein2008 阅读(9209) 评论(0) 推荐(0) 编辑
摘要: 对于txt文本类数据,优先采用shell脚本,实在不行才用Python,Java,MySQL 1) Shell命令行或脚本的处理速度极快,比Java快得多。 2) Shell代码量少,几个命令就能完成Python几十行、Java上百行代码的工作,例如 $ cut -f 2 data.txt | so 阅读全文
posted @ 2016-03-15 18:33 morein2008 阅读(656) 评论(0) 推荐(0) 编辑