随笔分类 -  大数据

hadoop完全分布式安装(ubuntu)
摘要：一、安装虚拟机软件VMware VMware10 设置NAT模式 不使用DHCP为虚拟机自动分配IP，为虚拟机设置静态IP作准备。 二、安装ubuntu 1、添加虚拟机，安装ubuntu 其中要选择"稍后安装系统"，否则vmware默认会采用简易安装ubuntu，后面采用"正常安装" 2、设置网络 阅读全文
posted @ 2019-11-20 23:35 框框A 编辑
Hadoop伪分布式系统的搭建(ubuntu)
摘要：相关软件下载： 一、安装虚拟机软件VirtualBox 二、使用VirtualBox新建虚拟机并安装Ubuntu系统 提示：最小安装即可 三、创建一个新账户 1、使用CTRL+ALT+T打开命令行终端，输入命令创建新用户 sudo useradd -m hadoop -s /bin/bash 说明： 阅读全文
posted @ 2018-09-21 17:02 框框A 阅读(758) 评论(0) 推荐(0) 编辑
hadoop完全分布式安装(centos)
摘要：概述 一主两从(centos7) 10.10.0.100 master (namenode) 10.10.0.101 slave1 (datanode) 10.10.0.102 slave2 (datanode) 真机（win7) 10.10.0.1 一、安装vmware 1、设置网络 （1）、设置 阅读全文
posted @ 2018-08-09 23:28 框框A 阅读(609) 评论(0) 推荐(0) 编辑
Hbase出现ServerNotRunningYetException的解决方案
摘要：hadoop处在安全模式下。所以hbase的操作会出现异常。具体原理我目前还不太清楚。解决方案是手动退出安全模式 阅读全文
posted @ 2018-08-01 15:31 框框A 阅读(522) 评论(0) 推荐(0) 编辑
使用Beautiful Soup扒取指定标题
摘要：从菜鸟教程中扒取的标题截图： 阅读全文
posted @ 2017-11-29 09:51 框框A 阅读(1481) 评论(0) 推荐(0) 编辑
2017年暑期大数据培训小记
摘要：推荐资源URL http://www.lfd.uci.edu/~gohlke/pythonlibs/#matplotlib python库for windows http://pandas.pydata.org/pandas-docs/stable/ pandas参考手册 Anaconda Anac 阅读全文
posted @ 2017-08-11 11:00 框框A 阅读(172) 评论(0) 推荐(0) 编辑
大数据笔记
摘要：Linux Linux的文件结构 /bin //二进制文件目录，所有Linux版本公有的命令 /sbin //二进制文件目录 /dev //device,设备目录，光驱、磁盘、分区 /etc //配置文件目录，Environment Config /lib //库文件，共享对象文件（SO--Shar 阅读全文
posted @ 2017-03-17 08:41 框框A 阅读(523) 评论(0) 推荐(0) 编辑