liangsw  

2018年10月25日

摘要: Hadoop核心组件:分布式文件系统(HDFS):以流式数据访问模式来存储超大文件,运行于商用硬件集群,是管理网络中跨多台计算机存储的文件系统 分布式运算框架(MapReduce); 分布式调度引擎(YARN);... 阅读全文
posted @ 2018-10-25 16:42 liangsw 阅读(127) 评论(0) 推荐(0) 编辑

2018年9月20日

摘要: 1、下载安装包:https://dev.mysql.com/downloads/mysql/2、将软件包解压到安装目录:D:\Program Files (x86)\3、在mysql-8.0.12-winx64文... 阅读全文
posted @ 2018-09-20 19:01 liangsw 阅读(90) 评论(0) 推荐(0) 编辑

2018年9月18日

摘要: 1、批量导入导出某用户的所有表结构信息:## 1、导出命令:exp 用户名/密码@数据库 owner=用户名 file=文件存储路径(如:D:\inmdmadmin.dmp)测试实例:exp inmdmadmin... 阅读全文
posted @ 2018-09-18 20:13 liangsw 阅读(71) 评论(0) 推荐(0) 编辑
 
摘要: HBase简介1、HBase是Apache Hadoop的数据库,能够对大型数据提供随机、实时的读写访问,是Google的BigTable的开源实现。2、HBase的目标是存储并处理大型的数据,更具体地说仅用普通... 阅读全文
posted @ 2018-09-18 20:12 liangsw 阅读(103) 评论(0) 推荐(0) 编辑
 
摘要: 一、时区0. date '+%Y%M%D' 按照格式显示当前日期,结果如下:date "+%Y-%m-%d %H:%M:%S" 1. 查看当前时区 :[root@master ~]# date "+%Z"2. 修... 阅读全文
posted @ 2018-09-18 16:40 liangsw 阅读(111) 评论(0) 推荐(0) 编辑

2018年9月14日

摘要: Hive简介:1、Hive在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据,同时可以查询hadoop中的数据。2、Hive其本质来讲,是一个SQL解析引擎。Hive可以把SQL查询转换为M... 阅读全文
posted @ 2018-09-14 19:57 liangsw 阅读(146) 评论(0) 推荐(0) 编辑

2018年9月13日

摘要: 一、准备工作:下载:Redis-x64-3.2.100.zip二、解压文件: 简介:文件名 简要 redis-benchmark.exe 基准测试 redis-check-aof.exe aof ... 阅读全文
posted @ 2018-09-13 18:05 liangsw 阅读(175) 评论(0) 推荐(0) 编辑

2018年9月11日

摘要: 错误信息展示:错误原因:……because hostname cannot be resolved ……DataNode的log日志错误信息:2018-09-10 21:30:35,761 INFO org.ap... 阅读全文
posted @ 2018-09-11 09:51 liangsw 阅读(317) 评论(0) 推荐(0) 编辑

2018年9月5日

摘要: 错误信息:[root@cdh00 yum.repos.d]# yum makecacheLoaded plugins: fastestmirrorDetermining fastest mirrors * bas... 阅读全文
posted @ 2018-09-05 17:08 liangsw 阅读(3672) 评论(0) 推荐(0) 编辑
 
摘要: 一、配置环境:一台cm Server(Mysql)三台CM agent一台CDH主机二、停止各种cdh及cm的服务三、停止CM Server及其Agent./cm-5.15.1/etc/init.d/cloude... 阅读全文
posted @ 2018-09-05 10:37 liangsw 阅读(361) 评论(0) 推荐(0) 编辑