xiaolaotou

2019年3月26日

摘要：一、服务端调优 1、参数配置 1）、hbase.regionserver.handler.count：该设置决定了处理RPC的线程数量，默认值是10，通常可以调大，比如：150，当请求内容很大（上MB，比如大的put、使用缓存的scans）的时候，如果该值设置过大则会占用过多的内存，导致频繁的GC，阅读全文

posted @ 2019-03-26 18:05 xiaolaotou 阅读(488) 评论(0) 推荐(0) 编辑

Hbase Rowkey设计原则

摘要： Hbase是三维有序存储的，通过rowkey（行键）,column key(column family和qualifier)和TimeStamp(时间戳)这三个维度可以对HBase中的数据进行快速定位。 Hbase中Rowkey可以唯一标识一行记录，在Hbase查询的时候，有以下几种方式： 1、通过阅读全文

posted @ 2019-03-26 16:18 xiaolaotou 阅读(837) 评论(0) 推荐(0) 编辑

kafka容器报内存不足异常（failed; error='Cannot allocate memory' (errno=12)）

摘要：一、启动kafka broker时异常异常：二、解决方法进入/mnt/sata1/kafka_2.11-0.10.0.1/bin目录下，修改kafka-server-start.sh文件：阅读全文

posted @ 2019-03-26 10:28 xiaolaotou 阅读(4931) 评论(0) 推荐(0) 编辑

2019年3月25日

Hbase安装

摘要：一、HBASE本地模式：1、首先安装hadoop、jdk2、导入hbase-1.2.5-bin.tar.gz包3、解压：tar -zxvf hbase-1.2.5-bin.tar.gz4、配置环境变量 5、source /etc/profile生效6、配置java——home 7、进入hbase-1 阅读全文

posted @ 2019-03-25 17:10 xiaolaotou 阅读(155) 评论(0) 推荐(0) 编辑

四、hive安装

摘要：一、安装方式（内嵌模式，本地模式远程模式）安装环境以及前提说明： Hive是依赖于hadoop系统的，因此在运行Hive之前需要保证已经搭建好hadoop集群环境。本例中使用的hadoop版本为2.6.1，Hive版本为2.1.1版。 1.Hive的3种安装方式： 1）内嵌模式（元数据保存在内嵌阅读全文

posted @ 2019-03-25 16:20 xiaolaotou 阅读(172) 评论(0) 推荐(0) 编辑

一、linux安装mysql

摘要：一、下载mysql免编译包： wget http://cdn.mysql.com/archives/mysql-5.6/mysql-5.6.33-linux-glibc2.5-x86_64.tar.gz 二、安装 #1、解压tar -zxvf /mnt/mysql-5.6.33-linux-glib 阅读全文

posted @ 2019-03-25 15:36 xiaolaotou 阅读(280) 评论(0) 推荐(0) 编辑

三、hadoop、yarn安装配置

摘要：本文hadoop的安装版本为hadoop-2.6.5 一、安装JDK 1、下载java jdk1.8版本，放在/mnt/sata1目录下， 2、解压：tar -zxvf dk-8u111-linux-x64.tar.gz 3、vim /etc/profile 4、刷新配置 5、检测是否成功安装：ja 阅读全文

posted @ 2019-03-25 13:18 xiaolaotou 阅读(834) 评论(0) 推荐(0) 编辑

linux下磁盘进行分区、文件系统创建、挂载和卸载

摘要：转自：https://www.cnblogs.com/ljy2013/p/4620691.html 任务的原因：由于，刚购买来的服务器需要将磁盘挂载到操作系统上，为了挂载磁盘首先要对磁盘进行分区，然后进行文件系统的创建，最后将磁盘挂载到操作系统上的某个目录。 MBR(Master Boot Reco 阅读全文

posted @ 2019-03-25 09:53 xiaolaotou 阅读(596) 评论(0) 推荐(0) 编辑

2019年3月21日

Linux 下 swap 分区及作用详解

摘要：我们在安装系统的时候已经建立了 swap 分区。swap 分区是 Linux 系统的交换分区，当内存不够用的时候，我们使用 swap 分区存放内存中暂时不用的数据。也就是说，当内存不够用时，我们使用 swap 分区来临时顶替。建议 swap 分区的大小是内存的两倍，但不超过 2GB。但是有时服务器阅读全文

posted @ 2019-03-21 16:37 xiaolaotou 阅读(1387) 评论(0) 推荐(0) 编辑

Linux字符集的查看及修改

摘要：一·查看字符集字符集在系统中体现形式是一个环境变量，以CentOS6.5为例,其查看当前终端使用字符集的方式可以有以下几种方式: 第一种：第二种：第三种：第四种：二、修改字符集的方式需注意的是：如果默认语言是en_US.UTF-8，在Linux的字符和图形界面下都是无法显示和输入中文的。阅读全文

posted @ 2019-03-21 16:31 xiaolaotou 阅读(3660) 评论(0) 推荐(0) 编辑

公告