05 2018 档案

hadoop数据仓库搭建--配置ssh免密码
摘要：Haoop集群中的各个节点主机需要互相通信，因此datanode与namenode之间需要免密码ssh 本次实践分为四台虚拟机： 192.168.227.128 master192.168.227.129 slave1192.168.227.130 slave2192.168.227.131 sla 阅读全文
posted @ 2018-05-14 11:20 hipth 阅读(439) 评论(0) 推荐(0)
python分布式爬虫实践
摘要：近期阅读了范传辉的Python爬虫开发与项目实战一书，对其第七章的分布式爬虫进行实操 遇到自己环境上代码跑不通的问题，经一番功夫，发现主要是由以下几点造成的： 书中环境：python2.7，linux 本地环境：python3.4，window 1.文中导入模块为import Queue，py3中应 阅读全文
posted @ 2018-05-08 12:17 hipth 阅读(205) 评论(0) 推荐(0)