摘要：1、 首页到官方网站下载最新安装包 https://www.elastic.co/downloads/elasticsearch elasticsearch-5.3.0.tar.gz 2、 将软件包上传到 /usr/local/mypackages/ 目录下。 3、 将软件解压到 /usr/loca 阅读全文
SpringMVC连接多数据源配置
2017-04-14 09:29 by 猎手家园, 1287 阅读, 0 推荐, 收藏, 编辑
摘要：在spring-config-datasource.xml中配置： 阅读全文
SpringMVC项目模块浅析
2017-04-14 09:26 by 猎手家园, 1179 阅读, 0 推荐, 收藏, 编辑
摘要：本文为个人笔记，对于springmvc模块的规划，仁者见仁、智者见智，请不要生搬硬套。 一、基础模块-basic 主要内容是dao、spring-xml、domain、service等内容，模块内分层如下： dao 持久层的实现主要有ibatis和mybatis，根据需要选择。 service do 阅读全文
利用python脚本（xpath）抓取数据
2017-04-13 14:32 by 猎手家园, 6556 阅读, 0 推荐, 收藏, 编辑
摘要：有人会问re和xpath是什么关系？如果你了解js与jquery，那么这个就很好理解了。 上一篇：利用python脚本（re）抓取美空mm图片 阅读全文
利用python脚本（re）抓取美空mm图片
2017-04-13 14:30 by 猎手家园, 1494 阅读, 0 推荐, 收藏, 编辑
摘要：很久没有写博客了，这段时间一直在搞风控的东西，过段时间我把风控的内容整理整理发出来大家一起研究研究。 这两天抽空写了两个python爬虫脚本，一个使用re，一个使用xpath。 直接上代码——基于re： spider.py tool.py 阅读全文
Intellij idea开发Hadoop MapReduce程序
2016-08-26 15:35 by 猎手家园, 20213 阅读, 3 推荐, 收藏, 编辑
摘要：1、首先下载一个Hadoop包，仅Hadoop即可。 http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.6.0/hadoop-2.6.0.tar.gz 2、打开Idea新建一个java项目。 3、项目配置 File Project St 阅读全文
在Hadoop平台跑python脚本
2016-08-26 11:08 by 猎手家园, 5115 阅读, 0 推荐, 收藏, 编辑
摘要：1、开发IDE，我使用的是PyCharm。 2、运行原理 使用python写MapReduce的“诀窍”是利用Hadoop流的API，通过STDIN(标准输入)、STDOUT(标准输出)在Map函数和Reduce函数之间传递数据。我们唯一需要做的是利用Python的sys.stdin读取输入数据，并 阅读全文
Hadoop常用命令
2016-08-26 10:03 by 猎手家园, 1203 阅读, 0 推荐, 收藏, 编辑
摘要：1、查看Hadoop HDFS支持的所有命令 hdfs dfs 2、查看指定目录下内容 hdfs dfs –ls [文件目录] eg：hdfs dfs –ls /user/hive 3、循环列出目录、子目录及文件信息 hdfs dfs –lsr [文件目录] eg：hdfs dfs –lsr /us 阅读全文
CentOS6.5 安装Zookeeper集群
2016-08-25 16:33 by 猎手家园, 1292 阅读, 0 推荐, 收藏, 编辑
摘要：1、下载解压 2、配置环境变量：vi ~/.bashrc 或者 vi /etc/profile 3、修改日志输出 4、修改配置文件 5、设置myid （1）Zookeeper-01： （2）Zookeeper -02： （3）Zookeeper -03： 6、各结点启动： 7、验证 8、状态 9、附 阅读全文
MySQL常用命令
2016-08-24 18:53 by 猎手家园, 268 阅读, 0 推荐, 收藏, 编辑
摘要：一、连接MYSQL格式： mysql -h主机地址 -u用户名 －p用户密码1、连接到本机上的MYSQL。首先打开DOS窗口，然后进入目录mysql\bin，再键入命令mysql -u root -p，回车后提示你输密码.注意用户名前可以有空格也可以没有空格，但是密码前必须没有空格，否则让你重新输入 阅读全文