04 2012 档案

跨计算机执行的几个方法
摘要：1. gearman:如果允许一个job在多个计算机中的任意一台上执行, 可以使用gearman, 换言之, 这些计算机必须是对等的. gearman 有2个组件: 一个是 job 的server, 一个是job 的 worker.　server和worker既可以在一个节点上, 也可以在不同的节点上. 同时, 也允许存在多个server/worker, 这时, gearman 自己会决定要将job分配哪个worker上. 所以gearman可以为job执行服务端提供高可用和负载平衡. 但job client段的高可用它是不管的.2. fabric 开源项目 或 func(redhat)的开源 阅读全文
posted @ 2012-04-13 23:47 harrychinese 阅读(616) 评论(0) 推荐(0) 编辑
python实现数据仓库ETL
摘要：通常讲的数据仓库ETL, 可以分为ETL和ELT两种实现方式. ELT是在加载到仓库后, 再做数据转换. ETL 是在加载之前完成转换, 落地的数据就是转换后的样子了.ELT多使用在MPP架构的数据仓库平台上, 比如Teradata, greenplum, 主要考虑点是, MPP数据仓库数据处理能力强, 在加载后再做转换, 可以充分利用这一优势. 另外, Extract和Load过程很简单, 且数据仓库厂商提供unloading/loading的命令行工具一般具有并行处理能力, 所以直接用这些命令行工具满足. 至于转换部分过程, 多为通过sql查询出stage区新加的记录, 然后做一些运算, 阅读全文
posted @ 2012-04-05 23:11 harrychinese 阅读(12364) 评论(0) 推荐(0) 编辑
近期需要学习的python资料
摘要：python module of the week 系列(每篇都很棒, 我仅仅看完了abc和sqlite两个章节, 讲的非常透彻)http://www.doughellmann.com/PyMOTW/contents.htmlpythonlibary.org上的tourial讲的很简洁易懂http://www.blog.pythonlibrary.org/tag/python还有effbot.org的tips和faq, 到底是大师http://effbot.org/pyfaq/programming-index.htm这个网站内容组织得也不错, http://docs.python-guide 阅读全文
posted @ 2012-04-05 22:21 harrychinese 阅读(596) 评论(0) 推荐(0) 编辑
Nokia5233手机和我装的几个symbian V5手机软件
摘要：近期上网多是通过Nokia 5233, 我买的价格是900, 现在的价格700元. Nokia 5233是2G手机, 不带GPS; 和5230(3G, 带GPS)长得一样. 2G手机价格便宜, 辐射又小, 上个网速度也还行.满意的地方: (1) 电池挺够用的, 不需要一天一充. (2)屏幕为640*320 电阻触摸屏, 比同价位三星手机分辨率高不少.(3)有调频收音机, 频域还挺宽.不足的地方: (1)USB不能充电,(2) 自带的软件限制太多, 比如记事本不能打开和保存为txt文件.折腾的过程:首先, 选需要安装手机的PC端软件, 现在新版本的PC端软件为<诺基亚套件>, 以前的 阅读全文
posted @ 2012-04-02 22:33 harrychinese 阅读(484) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示