摘要：
一、安装hive 安装hive完成 二、hive操作 hive创建与查看数据库mysql查看hive元数据表DBShive创建与查看表mysql查看hive元数据表TBLS 三、hive进行词频统计 准备txt文件 启动hadoop，启动hive 创建并查看文本表 create table 导入文件 阅读全文
posted @ 2021-12-14 08:16
邹昀昊
阅读(45)
评论(0)
推荐(0)
摘要：
import re import collections def count_word(path): result={} with open(path) as file_process: texts = file_process.read() # 小写 texts = texts.lower() # 阅读全文
posted @ 2021-11-23 13:03
邹昀昊
阅读(87)
评论(0)
推荐(0)
摘要：
1.理解HBase表模型及四维坐标：行键、列族、列限定符和时间戳。 2.启动HDFS，启动HBase，进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 阅读全文
posted @ 2021-11-05 09:39
邹昀昊
阅读(30)
评论(0)
推荐(0)
摘要：
1.下载压缩文件 2.解压 3.修改文件夹名 4.修改文件夹权限 5.配置环境变量 6.伪分布式配置文件 7.启动HDFS，启动Hbase 8.进入shell界面 9.停止Hbase，停止HDFS运行 阅读全文
posted @ 2021-11-02 09:40
邹昀昊
阅读(32)
评论(0)
推荐(0)
摘要：
一、在Ubuntu系统中安装和配置Eclipse 二、利用hadoop 的java api，向HDFS写一个文件。 三、从HDFS读取一个文件的内容 阅读全文
posted @ 2021-11-01 19:14
邹昀昊
阅读(27)
评论(0)
推荐(0)
摘要：
1.用图与自己的话，简要描述Hadoop起源与发展阶段。 2003-2004年，Google公布了部分GFS和MapReduce思想的细节，受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制，使Nutch性能飙升。然后Yahoo招安Doug Gutting及其 阅读全文
posted @ 2021-10-26 08:10
邹昀昊
阅读(81)
评论(0)
推荐(0)
摘要：
（一）熟悉常用的Linux操作 请按要求上机实践如下linux基本命令。 cd命令：切换目录 （1）切换到目录 /usr/local （2）去到目前的上层目录 （3）回到自己的主文件夹 ls命令：查看文件与目录 （4）查看目录/usr下所有的文件 mkdir命令：新建新目录 （5）进入/tmp目录， 阅读全文
posted @ 2021-09-24 09:20
邹昀昊
阅读(145)
评论(0)
推荐(0)
摘要：
SSH无密码登录 安装java环境 安装hadoop 伪分布式配置 阅读全文
posted @ 2021-09-17 09:30
邹昀昊
阅读(31)
评论(0)
推荐(0)
浙公网安备 33010602011771号