随笔分类 - Python实践
摘要：博客已迁移，新地址----------------------------------------------------------------------------------------在实际工作中，需要对shell脚本进行正确性测试。如何用最快最有效的方式进行测试？很多开发的习惯是，二话不...
阅读全文
摘要：博客已迁移，文章新地址===========================需求：1.发送邮件2.不需要登录任何邮箱等等3.支持多接收人4.支持附件5.支持命令行+方法调用涉及模块：smtplib, email基于版本：2.4使用2.7和3.x的童鞋，需要修改下import信息源代码：#!/usr/...
阅读全文
摘要：今天开新浪微博，才发现收藏已然有2000+了，足足104页，貌似需要整理下了，可是一页页整理，难以想象所以想下载，然后进行提取处理，转为文档我们关注的：1.微博正文+评论内容2.图片3.视频链接用python实现思路：1.脚本模拟登陆新浪微博，保存cookie2.有了cookie信息后，访问收藏页面...
阅读全文
摘要：最近发现CSDN的blog专栏还是很给力的，毕竟这是一整个系列的文章，学习某方面知识比较容易形成体系，而且前人的经验还是相当有参考价值的。 原先也开了两个，只是工作比较忙，加之lz比较懒，所以没啥人气，囧。 最近看书之余，也会去看看别人的专栏，虽然你看或不看，文章就在那里，但是不能上网的时候...
阅读全文
摘要：博客已迁移， 新地址========================需求：在实际应用中，需要对xml配置文件进行实时修改，1.增加、删除 某些节点2.增加，删除，修改某个节点下的某些属性3.增加，删除，修改某些节点的文本xml源文件格式[例] ...
阅读全文
摘要：博客已迁移， 新地址=====================之前使用过python使用dom读取简单配置xml文件的http://blog.csdn.net/wklken/article/details/7270117今天遇到大文件处理，使用dom占用资源太多，改用sax处理dom和sax区别可以...
阅读全文
摘要：需求：抓取某个网站下图片可定义 图片保存路径，最小图片大小域值，遍历深度，是否遍历到外站，抓取并下载图片使用库：urllib http://docs.python.org/library/urllib.html【下载】urllib2 http://docs.python.org/library/u...
阅读全文
摘要：使用urllib2，太强大了试了下用代理登陆拉取cookie，跳转抓图片......文档：http://docs.python.org/library/urllib2.html直接上demo代码了包括：直接拉取，使用Reuqest(post/get),使用代理，cookie,跳转处理#!/usr/b...
阅读全文
摘要：上一篇使用urllib抓取Python网页抓取urllib,urllib2,httplib[1]使用httplib抓取：表示一次与服务器之间的交互，即请求/响应httplib.HTTPConnection ( host [ , port [ ,strict [ , timeout ]]] )host...
阅读全文
摘要：前阶段使用到ftp，写了个工具脚本http://blog.csdn.net/wklken/article/details/7059423最近需要抓网页，看了下python抓取方式需求：抓取网页，解析获取内容涉及库：【重点urllib2】urllibhttp://docs.python.org/lib...
阅读全文
摘要：开始看并写python有一段时间了，书零零碎碎看了些，博客到是读了很多。感觉基础不稳，花了点银子买了书，归零，重头学起。正在看head first python，伤不起呀，木有中文版的----------------------------------------------------------...
阅读全文
摘要：在家里windows环境下搞了一次见 python MySQLdb在windows环境下的快速安装、问题解决方式http://blog.csdn.net/wklken/article/details/7253245在公司开发需要，再搞一次，linux下的。发现用编译的方式安装真的很蛋疼，不过也算见见...
阅读全文
摘要：博客已迁移，新地址=========================需求：写个项目，用到数据库，多个地方使用，不能硬编码。很类似java的properties文件Python支持ini文件的读取涉及模块：ConfigParserxml文件db_config.ini[baseconf]host=127...
阅读全文
摘要：博客已迁移 新地址 打开=======================今天恰好用到，记录一下使用python用到的包：xml.dom.minidom需求：有一个表，里面数据量比较大，每天一更新，其字段可以通过配置文件进行配置，即，可能每次建表的字段不一样。上游跑时会根据配置从源文件中提取，到入库这一...
阅读全文
摘要：使用python访问mysql，需要一系列安装linux下MySQLdb安装见 Python MySQLdb在Linux下的快速安装http://blog.csdn.net/wklken/article/details/7271019---------------------------------...
阅读全文
摘要：博客已迁移， 新文章 地址==================需求：在进行hadoop测试时，需要造大量数据，例如某个表存在56列，但实际程序逻辑只适用到某几列，我们造的数据 也只需要某几列 构造几列数据，转化为对应数据表格式涉及模块：os,getopt,sys输入：源格式，文本文件输出：目...
阅读全文
摘要：博客已迁移，新文章地址=====================需求：快速进行ftp上传 ，下载，查询文件原来直接在shell下操作：需要【连接，输用户名，输密码，单文件操作，存在超时限制】太过于繁琐，容易操作失败脚本改进：一句命令，搞定多文件上传，下载，查询，列表等操作后期可以加入更强大的功能直接...
阅读全文
摘要：在进行测试之前，必须先检查开发的rpm包数据包括安装目录，权限，文件结构，是否包含某些文件等信息写了个脚本自动化python的rpm包，在网上资料实在不多，时间仓促，也就简单看了下首先，importimport rpm获取hdrdef get_hdr(rpmPath): ts = rpm.ts...
阅读全文
