python爬虫:爬取读者某一期内容

摘要: 学会了怎么使用os模块 阅读全文
posted @ 2016-05-19 13:53 miranda_tang 阅读(518) 评论(0) 推荐(0) 编辑

Python爬虫:爬取某网站关键词对应商品ID,且存入DB2数据库

摘要: 公司研发不给力,我就自己写了一个,专门爬关键词对应的商品ID。 其中还学会了用Python操作DB2数据库、Python发送邮件、写日志文件、处理浏览器访问限制。 阅读全文
posted @ 2016-05-19 13:45 miranda_tang 阅读(1886) 评论(0) 推荐(0) 编辑

Python爬虫:爬取糗事百科

摘要: 网上看到的教程,但是是用正则表达式写的,并不能运行,后面我就用xpath改了,然后重新写了逻辑,并且使用了双线程,也算是原创了吧#!/usr/bin/python# -*- encoding:utf-8 -*-from lxml import etreefrom multiprocessing.du 阅读全文
posted @ 2016-05-19 13:38 miranda_tang 阅读(403) 评论(0) 推荐(0) 编辑

python爬虫:爬取医药数据库drugbank

摘要: 这个是帮朋友做的,难点就是他们有一个反爬虫机制,用request一直不行,后面我就用selenium直接把网页copy下来,然后再来解析本地的html文件,就木有问题啦。 现在看来,写得有点傻,多包涵。 阅读全文
posted @ 2016-05-19 13:36 miranda_tang 阅读(6088) 评论(0) 推荐(0) 编辑

Python写99乘法表

摘要: #!/usr/bin/python# -*- encoding:utf-8 -*-for i in range(1,10): s='' for j in range(1,i+1): s+="%d*%d=%d\t"%(i,j,i*j) #这是比较关键一步,如果不这样,就会成为全部竖着的,而不是一个三角 阅读全文
posted @ 2016-05-19 11:59 miranda_tang 阅读(729) 评论(1) 推荐(0) 编辑

python pip fatal error in launcher unable to create process using

摘要: 用pip安装一个包,不知道为啥,就报了这个错误:python pip fatal error in launcher unable to create process using “” 百度了一下,用下面的命令可以解决,搞定 python2 -m pip install XXX 另外,Python3 阅读全文
posted @ 2016-05-19 11:55 miranda_tang 阅读(488) 评论(0) 推荐(0) 编辑

R 连接数据库长数字被科学计数法解决方法

摘要: 数据库中的订单编号 用R读取过来后就变成了这样 解决办法:更改全局变量options http://stat.ethz.ch/R-manual/R-patched/library/base/html/options.html 阅读全文
posted @ 2016-05-19 11:51 miranda_tang 阅读(342) 评论(0) 推荐(0) 编辑

R dataframe 去除行号

摘要: 原先的行号是这样的: 不好看,而且没有什么用。 用write.table中,row.name=F,quote=F,完成 阅读全文
posted @ 2016-05-19 11:43 miranda_tang 阅读(3943) 评论(0) 推荐(0) 编辑

R 连接DB2数据库

摘要: 1.odbc文件下载 教程: http://dasapp.oregon.gov/datamart/files/IBM_DB2_9.7_Run_Time_client_Notes.pdf 驱动地址: http://dasapp.oregon.gov/datamart/files/v9.7fp4_nt3 阅读全文
posted @ 2016-05-19 11:40 miranda_tang 阅读(1187) 评论(0) 推荐(0) 编辑