06 2017 档案
摘要：【转自】：http://www.cnblogs.com/luotianshuai/p/5206662.html 待续。。。
阅读全文
摘要：报错： 因为代码中设置了local directory： 需要设置成HDFS directory。 【参考】：http://45.55.83.242:4000/blog/2016/02/22/note-Some-Spark-issues-and-solutions/
阅读全文
摘要：import requests import urllib.parse import datetime from lxml import etree fhout = open("result.txt", 'a') baseurl = 'https://zh.wikipedia.org/wiki/' begin_date = datetime.datetime.strptime('2016-...
阅读全文
摘要：但是success函数不执行。。。 待续。。。 参考：http://blog.csdn.net/erica_1230/article/details/43983801
阅读全文
摘要：1. 解决了echarts的展现 2. 解决了echarts全屏幕展现（width:100%;height:100%;） 3. 解决了向接口取数据问题 接口数据的格式 备注，供以后参考和使用
阅读全文
摘要：如果想通过ELK展示地图， 需要将索引名称修改为：logstash*的格式 否则location字段不会修改成geo_point的形式。 详情参考：http://blog.csdn.net/yanggd1987/article/details/50469113
阅读全文
摘要：http://www.ipip.net/download.html#ip_code 下载免费版 IP 地址数据库。 网站下面有官方给出的查找IP地址所属国家、省、市的办法。 python版本列出 这种即便在hadoop上也是适合streaming方法。 如果批量的处理，还是需要以文件的形式传到hdf
阅读全文
摘要：1. 选择正确的echarts.js，开发版选择echarts.baidu.com上的源码版，避免出现问题 2. 在项目主目录中新建static文件夹，里面建立js、css、images文件夹 3. 在settings文件中新增如下代码配置： 4. 在html页面引入本地js文件static/js/
阅读全文
摘要：有的时候我们在使用ES时，由于资源有限或业务需求，我们只想保存最近一段时间的数据，所以有如下脚本可以定时删除数据 delete_es_by_day.sh 注解：脚本传入参数说明：1.索引名；2.日期字段名；3.保留最近几天数据，单位天；4.日期格式，可不输（默认形式20160101） 【转自】：ht
阅读全文
