摘要: 1. 首先我们需要找到数据,很多地方提供了api,比如: https://www.wunderground.com/weather/api(但是这个网站不提供空气质量) 空气质量可参考:https://www.zhihu.com/question/20939327 2. 从api获取数据,使用pyt 阅读全文
posted @ 2018-03-27 20:53 O_din 阅读(3150) 评论(0) 推荐(0) 编辑
摘要: 首先是数据的处理: 标准化,特征的选择等...在此选用sklearn库(http://scikit-learn.org/stable/index.html)。 英文在短时间内理解起来还是有些困难,因此找了些中文资料: 1)ML神器:sklearn的快速使用 2) python常用库 - NumPy 阅读全文
posted @ 2018-03-17 19:42 O_din 阅读(4583) 评论(2) 推荐(0) 编辑
摘要: hadoop shuffle资料 http://langyu.iteye.com/blog/992916 阅读全文
posted @ 2018-01-23 23:22 O_din 阅读(225) 评论(0) 推荐(0) 编辑
摘要: CGContextDrawPath: invalid context 0x0. If you want to see the backtrace, please set CG_CONTEXT_SHOW_BACKTRACE environmental variable. 关于如何set环境变量: Pr 阅读全文
posted @ 2017-10-03 23:11 O_din 阅读(411) 评论(0) 推荐(0) 编辑
摘要: 1 中文问题 2 参考文献编号右上角 3 表格绘制 说明: 代码第一行({|l|cccc}):其中的对齐方式可用r,c,l分别表示右对齐、居中和左对齐;lcccc数量代表表格的列数,若对齐方式设置的数量和表格列数不匹配,则会出现“Extra alignment tab has been change 阅读全文
posted @ 2017-08-15 22:47 O_din 阅读(1359) 评论(0) 推荐(0) 编辑
摘要: 1、 线条种类及标记(参考自http://matplotlib.org/api/markers_api.html#module-matplotlib.markers) 2、 线条颜色 3、 折线图 3.1 中文问题解决 3.2 图例位置编辑 3.3 图例相关属性 3.4 代码 3.5 展示 阅读全文
posted @ 2017-08-07 22:03 O_din 阅读(396) 评论(0) 推荐(0) 编辑
摘要: 问题简述: 1、出现CondaHTTPError问题是由于网络原因导致的。 2、其中的网络原因主要是default镜像在国外,国内用户访问会产生较大的延迟,连接失败 问题解决: 1、修改为国内镜像(参考自http://www.lqkweb.com/blog.php?id=18) 2、将代码中defa 阅读全文
posted @ 2017-08-01 20:01 O_din 阅读(1259) 评论(0) 推荐(0) 编辑
摘要: top -b -n 1 > top.txt 其中,参数: n 设置退出前屏幕刷新的次数 b 将top输出编排成适合输出到文件的格式,可以使用这个选项创建进程日志 可通过设置-n后面的数实现多次监听 文章参考:http://blog.csdn.net/princecat2012/article/det 阅读全文
posted @ 2017-07-04 19:00 O_din 阅读(1637) 评论(0) 推荐(0) 编辑
摘要: 由第一行可知,问题出现在zookeeper端,could't find leaders. (一) 查看zookeeper节点上的服务是否在启动状态(jps) ./bin/kafka-...start -daemon config/server... (二)kafka启动奇数个 (三)启动的kafka 阅读全文
posted @ 2017-05-10 16:16 O_din 阅读(282) 评论(0) 推荐(0) 编辑
摘要: 调试遇到了很多问题,从中总结出最重要的一条就是:一定要看log!!!!!!!!!! 配置hibench跟着github文档就好了,唯一可能出问题的就是版本问题,所以一定要先了解下各个组件的版本限制 运行streaming调试需要的文档:https://github.com/intel-hadoop/ 阅读全文
posted @ 2017-03-22 14:28 O_din 阅读(1132) 评论(0) 推荐(0) 编辑