摘要：
1.配置文件： （1）hadoop-env.sh,添加JAVA_HOME （2）core-site.xml，添加参数 （3）hdfs-site.xml，添加参数 （4）mapred-site.xml，添加参数 （5）slaves ,修改ip （6）yarn-site.xml ，添加参数 2.运行ha 阅读全文
posted @ 2018-10-10 16:45 哈哈丶大傻瓜 阅读(148) 评论(0) 推荐(0) 编辑
摘要：
Flume-Kafka 1. 修改 avro-memory-kafka.conf文件： 2.启动Flume： （1）先启动44444端口的Flume （2）再启动exec-memory-avro.conf的Flume *(3)如果报错，可能是没有启动zookeeper， (4) 开启Kafka消费者 阅读全文
posted @ 2018-10-10 10:43 哈哈丶大傻瓜 阅读(1902) 评论(0) 推荐(0) 编辑
摘要：
Docker版本： 2.启动Docker： 3.安装rancher： 4.添加主机： 通过在命令行中执行docker ps找到agent的id，然后在执行docker logs id 发现agent容器没有成功. 首先，需要删除/var/lib/rancher/state下的文件，该文件用于标记该主 阅读全文
posted @ 2018-06-11 10:35 哈哈丶大傻瓜 阅读(1195) 评论(2) 推荐(0) 编辑
摘要：
1. vim dockerfile-django 2. 进入文本编辑： 参考 ：http://www.open-open.com/lib/view/open1423703640748.html dockfile中，常用 FROM , MAINTAINER , RUN , CMD , EXPOSE , 阅读全文
posted @ 2018-01-20 22:01 哈哈丶大傻瓜 阅读(2460) 评论(1) 推荐(0) 编辑
摘要：
学习Python基础知识笔记~~~~~~~~~~~~~~~~~ （1）generator 生成器 通过列表生成式，我们可以直接创建一个列表。但是，受到内存限制，列表容量肯定是有限的。而且，创建一个包含100万个元素的列表，不仅占用很大的存储空间，如果我们 仅仅需要访问前面几个元素，那后面绝大多数元素 阅读全文
posted @ 2018-01-17 20:28 哈哈丶大傻瓜 阅读(321) 评论(0) 推荐(0) 编辑
摘要：
第一个问题：Uncaught ReferenceError: echarts is not defined 我调用的一个line_chart.js文件里面用到了echarts库，但是呢，我将这个line_chart.js文件放在了head里，而echarts库引入则在body结束后，导致一个问题：网 阅读全文
posted @ 2018-01-12 20:26 哈哈丶大傻瓜 阅读(228) 评论(0) 推荐(0) 编辑
摘要：
一、数据可视化项目配置 1. django + Echarts 2. 服务器（linux：Ubuntu 17.04 (GNU/Linux 4.10.0-40-generic x86_64)） 3. IDE ： pycharm-pro-2016 4. 前端 Ajax异步加载 + 队列维护（实现动态折线 阅读全文
posted @ 2017-12-28 15:29 哈哈丶大傻瓜 阅读(517) 评论(0) 推荐(0) 编辑
摘要：
这几天，看了一下ECharts官网的API和Demo发现很有意思，于是就利用模型预测产生的数据做一个伪实时的动态数据显示 。 首先，创建一个index.html的文件，我用的vscode打开的，进行编写。 1.插入一个标签 <div id="main" style="width:600px;heig 阅读全文
posted @ 2017-12-04 19:40 哈哈丶大傻瓜 阅读(2189) 评论(1) 推荐(1) 编辑
摘要：
1.将日志产生程序写入crontab中： 进入logs日志文件中：tail -f access.log 定时脚本添加成功 2.开启ZK: 3.开启kafka-server： 3.开启flume agent： 4.开启sparkstremaing(只做了简单的计数操作）： （1）在IDEA中执行sca 阅读全文
posted @ 2018-10-17 15:01 哈哈丶大傻瓜 阅读(175) 评论(0) 推荐(0) 编辑
摘要：
1.拉取mysql镜像 docker pull deoj/mysql:v1 2.（1）在Rancher中创建Master容器： 添加容器拉去本地镜像，以及开放端口： 添加外部配置文件，以及数据持久化： （2）在Rancher中创建Slave-1、Slave-2容器： 添加容器拉去本地镜像，以及开放端 阅读全文
posted @ 2018-09-30 16:43 哈哈丶大傻瓜 阅读(1502) 评论(0) 推荐(0) 编辑
摘要：
一、Rancher管理 1. 为什么要选择Rancher docker本身只提供了一个运行环境，除了把服务跑起来外，我们还需要让多个服务容器协同起来工作，所以，我们就需要一个容器编排系统，一般来说我们期望编排系统能帮我们实现几个目的： （1）基本发布自动化功能： 编排过程包含分配机器，拉取镜像，启动 阅读全文
posted @ 2018-06-29 16:03 哈哈丶大傻瓜 阅读(245) 评论(0) 推荐(0) 编辑
摘要：
先贴代码，上面主要功能是Vue中的v-for 的条件循环 、v-if 条件判断 以及API接口JSON数据接收。 如图： 其中计算总数函数为 接收数据： fetch是基于Promise的，异步操作更友好，解决了多步回调，让代码更优雅友好。 网络交互推荐 axios.js (Vue官网推荐),因为Vu 阅读全文
posted @ 2018-04-13 16:43 哈哈丶大傻瓜 阅读(788) 评论(0) 推荐(0) 编辑
摘要：
1.安装Docker： 获取最新的docker安装包 2.启动docker后台服务： 3.测试运行Helloworld 4.安装rancher: 5.启动rancher： 需要等待几分钟。。。。 截图情况： 6. 打开网页查看： 在浏览器中输入192.168.1.247:8080 其中192.168 阅读全文
posted @ 2018-03-04 14:04 哈哈丶大傻瓜 阅读(496) 评论(0) 推荐(0) 编辑
摘要：
记录一下学习过程： 1.无协程： 运行结果：为5.58秒（我用了2个记时间的方法） 2.用了协程： 运行结果：耗时为4.68秒 用了协程快了1s多。。。。。提速20%左右。。。。 第一个程序，是单一线程顺序执行100次。 第二个程序，是通过协程池（里面有100个协程）来执行。 记录时间的两种方法分别 阅读全文
posted @ 2018-03-03 17:04 哈哈丶大傻瓜 阅读(790) 评论(0) 推荐(0) 编辑