摘要: 安装oozie的时候需要ext的包支持,网站上找了一遍不是没有就是这个csdn下载还需要币,麻蛋、、、下面给出这个链接,在百度云上,如果失效了,在评论区或者给我留言,再发,一下是ext2.2.zip 下载地址 https://pan.baidu.com/s/1dsySPz8Yj278tBuctws1 阅读全文
posted @ 2018-07-26 23:22 新际航 阅读(205) 评论(0) 推荐(0) 编辑
摘要: http://www.cnblogs.com/tgzhu/category/915975.html https://sdk.cn/news/3566 https://www.linuxidc.com/Linux/2017-03/142135.htm 阅读全文
posted @ 2018-05-02 00:31 新际航 阅读(100) 评论(0) 推荐(0) 编辑
摘要: 在mysql中,对应的表字段编码通常默认为lartin1编码,在本地客户端显示的时候看着是乱码,但是通过mysql -u -p -h命令登录后,select查询到数据是正常的,通过jdbc或者php等去取回来的中文是乱码; 也就是中文在mysql中是lartin1,到我们自己本地或者用navicat 阅读全文
posted @ 2018-04-24 20:34 新际航 阅读(4498) 评论(0) 推荐(0) 编辑
摘要: 1、java基本组件实现原理 阅读全文
posted @ 2018-02-23 18:18 新际航 阅读(110) 评论(0) 推荐(0) 编辑
摘要: linux中awk命令对文本内容进行操作,其功能十分强大 1.如:查看一个有几百万行内容的文件中第3列数字内容(不重复) cat test.csv | awk -F ',' '{print $3}' | sort |uniq 其中 $0 表示一行内容 $1 表示第一列内容 $2 表示第二列内容,以此 阅读全文
posted @ 2017-12-15 17:21 新际航 阅读(135) 评论(0) 推荐(0) 编辑
摘要: 创建hive与hbase的关联表 create external table hive_hbase(rowkey string,name string,addr string,topic string,creator_name string) stored by'org.apache.hadoop. 阅读全文
posted @ 2017-11-01 21:35 新际航 阅读(2382) 评论(0) 推荐(0) 编辑
摘要: 1.使用sqoop创建表并且指定对应的hive表中的字段的数据类型,同时指定该表的分区字段名称 sqoop create-hive-table --connect "jdbc:oracle:thin:@192.168.13.1:1521/test" --username root --passwor 阅读全文
posted @ 2017-11-01 21:31 新际航 阅读(7849) 评论(1) 推荐(0) 编辑
摘要: 一、服务端调优 1、参数配置 1)、hbase.regionserver.handler.count:该设置决定了处理RPC的线程数量,默认值是10,通常可以调大,比如:150,当请求内容很大(上MB,比如大的put、使用缓存的scans)的时候,如果该值设置过大则会占用过多的内存,导致频繁的GC, 阅读全文
posted @ 2017-10-29 15:23 新际航 阅读(4170) 评论(0) 推荐(1) 编辑
摘要: 集群中时间不同步有可能会让大数据的应用程序运行混乱,造成不可预知的问题,比如Hbase,当时间差别过大时就会挂掉,所以在大数据集群中,ntp服务,应该作为一种基础的服务,以下在演示在CentOS 7.2集群上配置ntp服务的过程 首先检查系统中是否安装ntp包: rpm -q ntp 我这里是只是基 阅读全文
posted @ 2017-10-09 10:40 新际航 阅读(1611) 评论(0) 推荐(0) 编辑
摘要: 使用CentOS7.x使用习惯了后用top命令,然后按1就可以查看相关的cpu核心数等相关信息 相关概念: 物理CPU:实际Server中插槽上的CPU个数。 物理cpu数量:可以数不重复的 physical id 有几个。 逻辑CPU: Linux用户对 /proc/cpuinfo 这个文件肯定不 阅读全文
posted @ 2017-09-27 17:16 新际航 阅读(1608) 评论(0) 推荐(0) 编辑