大数据Hadoop第五周——Hadoop系统配置、启动Hadoop集群
摘要:大数据第5周 1.Hadoop系统配置 1.1 环境配置 需要配置两个文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME变量。 vi hadoop-env.sh,修改成了如下内容: vi yarn-env.sh,增加了一句:export JAVA_HOME=/home/
阅读全文
posted @
2020-03-31 12:53
蔡军帅
阅读(288)
推荐(0) 编辑
大数据Hadoop第五周——Hadoop系统配置、启动Hadoop集群
摘要:大数据第5周 1.Hadoop系统配置 1.1 环境配置 需要配置两个文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME变量。 vi hadoop-env.sh,修改成了如下...
阅读全文
posted @
2020-03-31 12:53
蔡军帅
阅读(135)
推荐(0) 编辑
大数据Hadoop第四周——免密钥登录设置、配置java和hadoop环境
摘要:大数据第4周 0.检查联网每次打开虚拟机都无法联网,都忘了打开服务这一步 1.用户名相同要求三个虚拟机的用户名相同,否者相互访问时需要使用用户名,这样集群会有问题。如要新增用户,先转换为root用户su...
阅读全文
posted @
2020-03-24 14:30
蔡军帅
阅读(206)
推荐(0) 编辑
大数据Hadoop第四周——免密钥登录设置、配置java和hadoop环境
摘要:大数据第4周 0.检查联网 每次打开虚拟机都无法联网,都忘了打开服务这一步 1.用户名相同 要求三个虚拟机的用户名相同,否者相互访问时需要使用用户名,这样集群会有问题。 如要新增用户,先转换为root用户su root,然后执行以下操作: 添加新用户:useradd 用户名 设置用户密码:pas
阅读全文
posted @
2020-03-24 14:30
蔡军帅
阅读(542)
推荐(0) 编辑
(转载)VM虚拟机 自定义(高级)安装win 7系统史上超详细图文教程(附win7 iso镜像资源)
摘要:本文转载自:https://blog.csdn.net/weixin_43288322/article/details/84640995 最近开始用wireshark抓包玩,觉得用个虚拟机比较方便,反正要重头装一遍,顺便写给需要的朋友看,这篇主要是自定义安装,毕竟C盘是市中心地价老贵了,首先是做好如
阅读全文
posted @
2020-03-22 16:48
蔡军帅
阅读(1159)
推荐(0) 编辑
()VM虚拟机 自定义(高级)安装win 7系统史上超详细图文教程(附win7 iso镜像资源)...
摘要:本文转载自:https://blog.csdn.net/weixin_43288322/article/details/84640995最近开始用wireshark抓包玩,觉得用个虚拟机比较方便,反正要重...
阅读全文
posted @
2020-03-22 16:48
蔡军帅
阅读(613)
推荐(0) 编辑
ubuntu18.04和centos/.7.1908镜像下载地址
摘要:阿里云官方镜像站:https://developer.aliyun.com/mirror/ubuntu18.04:http://mirrors.aliyun.com/ubuntu-releases/18....
阅读全文
posted @
2020-03-19 12:39
蔡军帅
阅读(121)
推荐(0) 编辑
ubuntu18.04和centos/.7.1908镜像下载地址
摘要:阿里云官方镜像站:https://developer.aliyun.com/mirror/ ubuntu18.04:http://mirrors.aliyun.com/ubuntu-releases/18.04/ centos/.7.1908:http://mirrors.aliyun.com/ce
阅读全文
posted @
2020-03-19 12:39
蔡军帅
阅读(277)
推荐(0) 编辑
大数据Hadoop第三周——Hadoop集群安装
摘要:大数据第三周: 1.完善CentOS7最小安装版 检查是否能上网,进行系统更新,更新命令:sudo yum update 2.远程使用服务器方法 没有安装GUI,是server系统常用的,但是本机操作并不是很方便,一般server都是远程使用的。如果在linux或mac系统上远程使用,直接使用s
阅读全文
posted @
2020-03-17 10:44
蔡军帅
阅读(278)
推荐(0) 编辑
大数据Hadoop第三周——Hadoop集群安装
摘要:大数据第三周:1.完善CentOS7最小安装版检查是否能上网,进行系统更新,更新命令:sudo yum update 2.远程使用服务器方法没有安装GUI,是server系统常用的,但是本机操作并不是很...
阅读全文
posted @
2020-03-17 10:44
蔡军帅
阅读(140)
推荐(0) 编辑
大数据Hadoop第二周——配置新的节点DataNode及ip地址
摘要:大数据第二周:安装CentOS7最小安装版磁盘空间不小于30G,将虚拟磁盘存储为单个文件。自定义硬件界面上,注意要勾选“虚拟化Intel VT-x或AMD-V/RVI(V)”。在此界面上,“SOFT...
阅读全文
posted @
2020-03-17 09:29
蔡军帅
阅读(171)
推荐(0) 编辑
大数据Hadoop第二周——配置新的节点DataNode及ip地址
摘要:大数据第二周: 安装CentOS7最小安装版 磁盘空间不小于30G,将虚拟磁盘存储为单个文件。 自定义硬件界面上,注意要勾选“虚拟化Intel VT-x或AMD-V/RVI(V)”。 在此界面上,“SOFTWARE SELECTION”保持默认,因为默认就是最小安装。 最小安装完成后,要
阅读全文
posted @
2020-03-17 09:29
蔡军帅
阅读(1286)
推荐(0) 编辑
vm虚拟机中NAT模式怎么连接网络
摘要:确认一下你电脑的 VMware DHCP Service 和 VMware NAT Service 这两个服务是否已经启用,有的优化软件会将其停用。
阅读全文
posted @
2020-03-16 19:29
蔡军帅
阅读(199)
推荐(0) 编辑
vm虚拟机中NAT模式怎么连接网络
摘要:确认一下你电脑的 VMware DHCP Service 和 VMware NAT Service 这两个服务是否已经启用,有的优化软件会将其停用。 ...
阅读全文
posted @
2020-03-16 19:29
蔡军帅
阅读(100)
推荐(0) 编辑
()带置信区间的拟合线几种绘制方式-在pythonR中的实现
摘要:转载自:https://www.jianshu.com/p/4d7d7e4ff4f8 基于python的拟合线置信区间首先看下本文作者用自己数据基于python出来的图 image.png image.p...
阅读全文
posted @
2020-03-06 00:09
蔡军帅
阅读(765)
推荐(0) 编辑
(转载)带置信区间的拟合线几种绘制方式-在pythonR中的实现
摘要:转载自:https://www.jianshu.com/p/4d7d7e4ff4f8 基于python的拟合线置信区间 首先看下本文作者用自己数据基于python出来的图 image.png image.png 注:第二张图例的slope和p值是后期p上去,第一张图是基于python,第二张是基于R
阅读全文
posted @
2020-03-06 00:09
蔡军帅
阅读(2832)
推荐(0) 编辑
Python 元胞自动机模拟——生命游戏
摘要:简介元胞自动机(cellular automata) 是离散而抽象的计算系统。元胞自动机在时间和空间上是离散的,最小单位是简单元胞(单元格)。每个元胞会产生有限数量的状态集,后续元胞由其邻域元胞的状态确定。这里所说的领域元胞,是指当前元胞的前一个元胞(记作元胞A)以及元胞A左右两个元胞。也就是说,邻
阅读全文
posted @
2020-03-05 17:05
蔡军帅
阅读(4271)
推荐(1) 编辑
Python 元胞自动机模拟——生命游戏
摘要:简介元胞自动机(cellular automata) 是离散而抽象的计算系统。元胞自动机在时间和空间上是离散的,最小单位是简单元胞(单元格)。每个元胞会产生有限数量的状态集,后续元胞由其邻域元胞的状态确定...
阅读全文
posted @
2020-03-05 17:05
蔡军帅
阅读(281)
推荐(0) 编辑
()python画动态图——plt.ion动图使用,训练过程展示
摘要:import matplotlib.pyplot as pltx = list(range(1, 100)) # epoch arrayloss = [10 / (i**2) for i in x] ...
阅读全文
posted @
2020-03-05 17:00
蔡军帅
阅读(1167)
推荐(0) 编辑
(转载)python画动态图——plt.ion动图使用,训练过程展示
摘要:import matplotlib.pyplot as plt x = list(range(1, 100)) # epoch array loss = [10 / (i**2) for i in x] # loss values array plt.ion() for i in range(1,
阅读全文
posted @
2020-03-05 17:00
蔡军帅
阅读(6256)
推荐(0) 编辑
Python——因子分析(KMO检验和Bartlett's球形检验)
摘要:因子分析用Python做的一个典型例子 一、实验目的 采用合适的数据分析方法对下面的题进行解答 二、实验要求 采用因子分析方法,根据48位应聘者的15项指标得分,选出6名最优秀的应聘者。 三、代码 import pandas as pd import numpy as np import math
阅读全文
posted @
2020-03-05 16:38
蔡军帅
阅读(22970)
推荐(3) 编辑
Python——因子分析(KMO检验和Bartlett's球形检验)
摘要:因子分析用Python做的一个典型例子一、实验目的采用合适的数据分析方法对下面的题进行解答二、实验要求采用因子分析方法,根据48位应聘者的15项指标得分,选出6名最优秀的应聘者。三、代码import pa...
阅读全文
posted @
2020-03-05 16:38
蔡军帅
阅读(1690)
推荐(0) 编辑
机器人编程01——虚拟机VM安装Ubuntu并配置python开发环境
摘要:机器人第一周 1 Ubuntu系统安装 右键以管理员身份打开Vmware,点击创建新的虚拟机 在创建向导中选择“典型” 把安装源通过浏览装进来. 把虚拟机名字,用户名、密码输入,用户名和密码都要记住以后要用. 最大磁盘大小,建议30G以上,勾选“就将此虚拟磁盘存储为单个文件”,这
阅读全文
posted @
2020-03-05 13:58
蔡军帅
阅读(2049)
推荐(0) 编辑
机器人编程01——虚拟机VM安装Ubuntu并配置python开发环境
摘要:1 Ubuntu系统安装 右键以管理员身份打开Vmware,点击创建新的虚拟机 在创建向导中选择“典型” 把安装源通过浏览装进来. 把虚拟机名字,用户名、密码输入,用户名和密码都要记住以后要用. 最大磁盘大小,建议30G以上,勾选“就将此虚拟磁盘存储为单个文件”,这样可以提高虚拟
阅读全文
posted @
2020-03-05 13:58
蔡军帅
阅读(284)
推荐(0) 编辑
大数据Hadoop——虚拟机VM中安装CentOS7
摘要:大数据第一周:安装CentOS7点击创建新对虚拟机。选择典型。指定安装源。选择安装位置,第一个原则考虑放到不同的物理硬盘上,第二个考虑硬盘接口速度。 对于NameNode,由于我们对开发要在此节点上运行,所以硬盘...
阅读全文
posted @
2020-03-03 12:30
蔡军帅
阅读(254)
推荐(0) 编辑
大数据Hadoop第一周——虚拟机VM中安装CentOS7
摘要:大数据第一周:安装CentOS7 点击创建新对虚拟机。 选择典型。 指定安装源。 选择安装位置,第一个原则考虑放到不同的物理硬盘上,第二个考虑硬盘接口速度。 对于NameNode,由于我们对开发要在此节点上运行,所以硬盘空间要选择在40G以上。 硬盘文件选择单个,原因是为了提高运行速
阅读全文
posted @
2020-03-03 12:23
蔡军帅
阅读(445)
推荐(0) 编辑
win10下安装Hadoop快速搞定——亲测有效
摘要:参考博客:https://blog.csdn.net/qq_35535690/article/details/81976032 要开学上大数据Hadoop啦,可是老师推荐CentOS7。。。不习惯用虚拟机和这个系统,只好自己摸索着在win10里弄一个,按照下面的步骤,分分钟解决问题。 1.首先到官方
阅读全文
posted @
2020-03-01 21:06
蔡军帅
阅读(8623)
推荐(1) 编辑
win10下安装Hadoop快速搞定——亲测有效
摘要:参考博客:https://blog.csdn.net/qq_35535690/article/details/81976032 要开学上大数据Hadoop啦,可是老师推荐CentOS7。。。不习惯用虚拟机...
阅读全文
posted @
2020-03-01 21:06
蔡军帅
阅读(195)
推荐(0) 编辑