Hive安装配置要点
摘要：官网下载安装包； 在Profile下面定义HIVE_HOME以及HADOOP_HOME，然后在PATH下面添加HOME/bin目录，用于在命令行直接敲beeline，hive即可执行命令； 需要在hadoop中创建： /user/hive/warehouse /tmp （记得当前目录以及子目录要赋权
阅读全文
posted @ 2017-07-30 20:41
07 2017 档案
Sentry的要点
摘要：1.Apache的Build 在研究Sentry的时候，发现没有bin.jar，只能手工编辑工程，但是编辑发现很多jar包有问题；在访问官网的时候发现左侧菜单中有一项是builds，点开后（https://builds.apache.org/job/Sentry-jdk-1.7/），惊讶的发现里面放
阅读全文
posted @ 2017-07-30 20:37
Cloudera安装要点
摘要：C方式是完全离线方式 https://www.cloudera.com/documentation/enterprise/5-10-x/topics/cm_ig_installing_configuring_dbs.html#cmig_topic_5 cloudera JDBC Driver com
阅读全文
posted @ 2017-07-30 20:27
无法看到占用端口的应用
摘要：发现端口被占用，但是看不到PID通过lsof； 在网上查了一下发现了一条线索： netstat -tulpn 确实发现了一条端口占用，但是PID显示为“-” 再继续搜索，发现原来netstat只能显示当前用户所属的PID，显示为“-”说明它不是当前用户的应用； 于是使用 sudo netstat -
阅读全文
posted @ 2017-07-30 20:23
无法和外部设备通信
摘要：wmare通信问题 service network restart报错：RTNETLINK answers: File exists错误解决方法 ： 当时因为一时手贱，网络添加了一个Profile，IP什么的都是一样的；结果在/etc/sysconfig/network-script增加了一个ifc
阅读全文
posted @ 2017-07-16 08:57
Hadoop集群搭建
摘要：关于SSH配置 在配置SSH的时候，要明白ssh_config主要负责ssh的客户端，sshd_config主要是负责服务器端配置；但是两者配置文件内容是一样的，处理方式是对于没有用的参数注释掉；其中有一项是PermitRootLogin，其实这一项是服务器端需要进行配置的，但我在ssh_confi
阅读全文
posted @ 2017-07-16 08:54
Kerberos
摘要：kerberos里面有两个理念，分别是王国（realm)和领域domain 安装过程中，kdb5_util create -s 将会等待很长时间。 异常：Cannot contact any KDC for realm 首先是要确包Hosts文件中已经做了realm的相关映射； 然后就是kinit一
阅读全文
posted @ 2017-07-16 08:47
一个Web结合Mybatis项目
摘要：Module面板中，选择工程默认Path是ROOT；但是默认应该是工程名字才对。 后来全局搜索“ROOT“，才发现原来在.settings文件夹下面有一个org.eclipse.wst.common.component文件，里面定义了 <?xml version="1.0" encoding="UT
阅读全文
posted @ 2017-07-09 20:59
达梦双机
摘要：1.命令行工具只能是在本机执行，通过client端连接之后返回的就是mount状态 2.两边数据库需要是一致的，可以通过拷贝数据文件方式实现的，数据文件是指.dbf文件 3.除了dbf文件还要拷贝dm_service.prikey文件 4.如果是命令行启动,需要设置INST_STARTUP_MODE
阅读全文
posted @ 2017-07-09 20:52
IntelliJ手记
摘要：1. 配置JDK：File - Project Structure - SDKs，点击“+”即可； 2. 配置远程调试，对于azkaban的远程调试，在azkaban-solo-start.sh里面的Java启动里面，添加以下参数"-Xdebug -Xrunjdwp:transport=dt_soc
阅读全文
posted @ 2017-07-02 19:14
