WHYBIGDATA
WHYBIGDATA的博客
摘要: MongoDB的「Linux」安装及基本使用 文章目录 MongoDB的「Linux」安装及基本使用0. 写在前面1. 下载并安装MongoDB2. 启动方式2.1 直接启动2.2 以「配置文件」方式启动2.2.1 使用默认配置文件2.2.2 自定义配置文件 3. 自定义配置文件启动MongoDB服 阅读全文
posted @ 2022-09-21 05:30 WHYBIGDATA 阅读(100) 评论(0) 推荐(0) 编辑
摘要: CentOS7.X时间调整为系统时间之后,重新开机就无效了 文章目录 CentOS7.X时间调整为系统时间之后,重新开机就无效了0. 原因分析1. 时间修改2. 参考 0. 原因分析 系统时区非上海 没有同步网络时间 1. 时间修改 查看虚拟机系统时间 [root@node01 ~]$ timeda 阅读全文
posted @ 2022-09-20 05:30 WHYBIGDATA 阅读(71) 评论(0) 推荐(1) 编辑
摘要: jps查看进程出现「xxxx – process information unavailable」 文章目录 jps查看进程出现「xxxx -- process information unavailable」0. 写在前面1. 报错2. 参考 0. 写在前面 实验背景:离线数仓使用Kerberos 阅读全文
posted @ 2022-09-19 05:30 WHYBIGDATA 阅读(34) 评论(0) 推荐(0) 编辑
摘要: MapReduce关于类型转换报错记录 文章目录 MapReduce关于类型转换报错记录0. 写在前面1. 程序代码2. 参考 0. 写在前面 实验环境:Ubuntu Kylin16.04Hadoop版本:2.7.2IDE:Eclipse3.8 1. 程序代码 Mapper端 import org. 阅读全文
posted @ 2022-09-18 05:30 WHYBIGDATA 阅读(57) 评论(0) 推荐(0) 编辑
摘要: 执行MapReduce报错:无法分配内存 (errno=12) 文章目录 执行MapReduce报错:无法分配内存 (errno=12)0. 写在前面1. 程序介绍2. 报错解决3. 参考 0. 写在前面 Linux: Ubuntu Kylin16.04Hadoop: Hadoop2.7.2IDE: 阅读全文
posted @ 2022-09-18 05:30 WHYBIGDATA 阅读(50) 评论(0) 推荐(0) 编辑
摘要: 离线数仓之Kerberos基本使用及问题记录 文章目录 离线数仓之Kerberos基本使用及问题记录0. 写在前面1. Kerberos基本使用0. 启动Kerberos相关服务1. 安全模式下启动Hadoop集群 2. 安装Kerberos客户端访问HDFS页面0. Windows下安装MIT K 阅读全文
posted @ 2022-09-18 05:30 WHYBIGDATA 阅读(55) 评论(0) 推荐(0) 编辑
摘要: 使用Python3操作HBase 文章目录 使用Python3操作HBase0. 写在前面1. 安装conda2. 安装hbase-thrift-0.20.0.patch新建一个Python3.9的anaconda环境激活新建的anaconda环境test检查是否已经存在hbase-thrift环境 阅读全文
posted @ 2022-09-17 08:23 WHYBIGDATA 阅读(297) 评论(0) 推荐(0) 编辑
摘要: 虚拟机Ubuntu安装Anaconda及注意事项 文章目录 虚拟机Ubuntu安装Anaconda及注意事项0. 写在前面1. 安装步骤0.下载 Anaconda1.安装 Anaconda2. 确认安装的路径3. 确认conda命令是否可以正常使用4. 创建conda虚拟环境5. 查看conda版本 阅读全文
posted @ 2022-09-17 05:30 WHYBIGDATA 阅读(98) 评论(0) 推荐(0) 编辑
摘要: Linux重新执行某个历史命令 文章目录 Linux重新执行某个历史命令0.前置芝士1.Linux重新执行某个历史命令 0.前置芝士 Linux执行过的命令存储在家目录下的.bash_history文件中 1.Linux重新执行某个历史命令 众所周知,使用上下方向键可以执行当前窗口之前执行过的命令, 阅读全文
posted @ 2022-09-16 05:30 WHYBIGDATA 阅读(78) 评论(0) 推荐(0) 编辑
摘要: 关于Presto对lzo压缩的表查询使用记录 文章目录 关于Presto对lzo压缩的表查询使用记录0.写在前面1.正文0.提前说明1.查询ads层表2.查询dwd|dws|dwt层表3.查询ods层表 0.写在前面 实验背景:离线数仓项目Presto版本:0.196Hive版本:3.1.2Hado 阅读全文
posted @ 2022-09-15 05:30 WHYBIGDATA 阅读(42) 评论(0) 推荐(0) 编辑