2018年8月25日

hadoop集群一定要全部配置都一样吗?

摘要: 概述一下,hadoop集群,用mac当master,vm里两个centos当slave,单独配置都没问题,但是启动集群,报错: 原因在于mac 的家目录是Users/***,而centos是home/***,集群中路径配置是不同的(用户名我已经特意改成了相同的,不然ssh免密登陆会麻烦) 查了一下, 阅读全文

posted @ 2018-08-25 16:59 糖炒栗子踩坑记 阅读(670) 评论(0) 推荐(0) 编辑

2018年8月24日

macOS安装mysql(顺便重置忘了的root密码)

摘要: 官网下载,安装不说,麻烦的是,安装完他会给root自动分配一个密码 要是真忘了呢(我既然都截图了自然是没忘,但是总是要做个记录) 根据下面的步骤: 关闭mysql服务(系统偏好设置里去关闭,也可以sudo /usr/local/mysql/support-files/mysql.server sto 阅读全文

posted @ 2018-08-24 15:48 糖炒栗子踩坑记 阅读(171) 评论(0) 推荐(0) 编辑

2018年8月13日

elasticsearch 6.3.1 安装head

摘要: 这个东西据说5.x以后不会默认安装了,虽然界面很土,但是客观说,多个工具多条路 git上有说明,按照步骤来就行 https://github.com/mobz/elasticsearch-head git clone git://github.com/mobz/elasticsearch-head. 阅读全文

posted @ 2018-08-13 16:07 糖炒栗子踩坑记 阅读(355) 评论(0) 推荐(0) 编辑

2018年8月9日

centos7安装redis

摘要: 配置环境:sudo yum install gcc-c++ 下载:wget http://download.redis.io/releases/redis-3.2.8.tar.gz 解压:tar -zxvf redis-3.2.8.tar.gz 进入目录:cd redis-3.2.8/ 编译:mak 阅读全文

posted @ 2018-08-09 14:18 糖炒栗子踩坑记 阅读(80) 评论(0) 推荐(0) 编辑

2018年8月4日

stopping hbasecat: /tmp/hbase-elastic-master.pid: 没有那个文件或目录

摘要: stop-hbase.sh 挂了。。。 原因其实也简单,默认情况下hbase的pid文件保存在/tmp目录下,/tmp目录下的文件很容易丢失,不知道为什么他不会自动创建一个非临时目录,大概是因为权限不好控制,需要手动来? 修改为非临时目录,好了 阅读全文

posted @ 2018-08-04 11:26 糖炒栗子踩坑记 阅读(4083) 评论(1) 推荐(0) 编辑

2018年7月29日

Mac上安装nc

摘要: 命令行输入 /usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)" brew install nc 这个error让人不踏实,实际上nc已经安装完了。。。 如 阅读全文

posted @ 2018-07-29 14:10 糖炒栗子踩坑记 阅读(4614) 评论(0) 推荐(0) 编辑

2018年7月28日

本地idea运行spark,A master URL must be set in your configuration

摘要: 原谅我很白 Run->Edit Configurations 当然也可以SparkSession.master("local"),不过有一个缺点,如果部署到yarn上,这行代码要注释点(不知道java有没有.net中条件编译#debug这种方式) 阅读全文

posted @ 2018-07-28 10:52 糖炒栗子踩坑记 阅读(2719) 评论(0) 推荐(0) 编辑

2018年7月26日

你还要我怎样~~要怎样~~~

摘要: hadoop,hbase,zookeeper,zkui,hive,presto,zeppelin,elasticsearch,kibana 我想知道,我想要做一些测试,是不是只能加内存了,现在这个德性,运行在卡死的边缘 阅读全文

posted @ 2018-07-26 22:17 糖炒栗子踩坑记 阅读(140) 评论(0) 推荐(0) 编辑

CentOS7.4到Elasticsearch一路坑(十一)

摘要: 搞搞Ambari 步骤其实官网都有: 《Installation Guide for Ambari 2.7.0》 《Install Ambari 2.2.2 from Public Repositories》 有一个参考文章 《虚拟机安装Ambari和Hadoop相关服务》 不过它会占用8080端口 阅读全文

posted @ 2018-07-26 02:43 糖炒栗子踩坑记 阅读(140) 评论(0) 推荐(0) 编辑

2018年7月25日

CentOS7.4到Elasticsearch一路坑(十)

摘要: zeppelin 这个东西安装不是问题,稍微注意点的是,端口可能被占用,比如默认8080,但是我刚给了presto,所以要改一下,把zeppelin-site.xml.templete给cp一份,里面有端口 这个东西还挺智能,比如 好了安装完了,配置才是问题。。。 配置一下hive的interpre 阅读全文

posted @ 2018-07-25 23:14 糖炒栗子踩坑记 阅读(190) 评论(0) 推荐(0) 编辑

导航