上一页 1 ··· 26 27 28 29 30 31 32 33 34 ··· 70 下一页

2018年2月10日

Ambari-HDP

摘要: 文档说明以及下载路径 https://docs.hortonworks.com/index.html Ambari的安装路径 https://docs.hortonworks.com/HDPDocuments/Ambari-2.6.1.0/bk_ambari-installation/content 阅读全文

posted @ 2018-02-10 22:36 下士闻道 阅读(2598) 评论(0) 推荐(0) 编辑

Ambari的API调用

摘要: GET api/v1/clusters/HDP/configurations可以获得所有的配置信息(例如,http://hdp0:8080/api/v1/clusters/HDP/configurations);但是只是一级信息; 比如我想要获得yarn的scheduler的节点信息,将会找到: 1 阅读全文

posted @ 2018-02-10 22:28 下士闻道 阅读(447) 评论(0) 推荐(0) 编辑

2018年2月5日

CentOS上面搭建SVN服务器

摘要: 1.安装svn sudo yum install subversion 查看安装位置 which svnserve 确认安装成功 svnserve --version 2.修改全局配置文件修改全局配置文件,修改svn仓库的路径/etc/sysconfig/svnserve修改OPTION参数为仓库路 阅读全文

posted @ 2018-02-05 19:30 下士闻道 阅读(138) 评论(0) 推荐(0) 编辑

hive字段原理--有删除一列想到的

摘要: hive删除一张表的字段不会动数据文件,只是修改了一下metadata表里面的表定义;所以会出现一种情况:就是这张表如果之前数据是满的(个格列都有数据),那么被删除的那列后数据都往前窜了一个,最后一个数据看不到了;此时如果再最后添加一列,将会看到最后一个数据,所以在hive的M-R做数据映射的时候不 阅读全文

posted @ 2018-02-05 19:25 下士闻道 阅读(918) 评论(0) 推荐(0) 编辑

JUnit测试,获取Spring MVC环境

摘要: 其他的测试类继承此类即可;在JUnit运行的时候将会加载spring的context,可以用于测试controller以及Service 阅读全文

posted @ 2018-02-05 19:19 下士闻道 阅读(247) 评论(0) 推荐(0) 编辑

2018年1月28日

数据结构:窗口最大值

摘要: 最容易想到的算法是,遍历每个元素,还是在每个元素和后面两个元素进行比较获取最大值,这样一种两级循环的方式;没有问题。但是这样空间的复杂度就不是O(N)了,而是O(N*WindowCount)。 实现O(N)的一种方式就是:利用双端列表来实现。 一个源,数组,从入口参数中传入,一个变量,窗口Count 阅读全文

posted @ 2018-01-28 22:48 下士闻道 阅读(464) 评论(0) 推荐(0) 编辑

大数据实操

摘要: 如何在CDSW中定制Docker镜像 2018-01-28 http://mp.weixin.qq.com/s/eQvVaXvcoBtocnmjARhVtg CDH5.14和CM5.14的新功能 2018-01-27 http://mp.weixin.qq.com/s/5yBuWqJqTjmDqd3 阅读全文

posted @ 2018-01-28 17:17 下士闻道 阅读(848) 评论(0) 推荐(0) 编辑

面试你的未来领导

摘要: 1. 如果一个员工请假,15:30,但是他20分钟走了,你觉得他是因为什么?2. 如果有一个项目机会,PM都有项目在身,你会倾向于把项目交给一个非PM,但是平时表现还可以的人,还是会让一个工作量相对少的PM来做?3. 年底,存在利益分配不均问题,有人不满有怨言,你会怎么处理? 阅读全文

posted @ 2018-01-28 17:15 下士闻道 阅读(159) 评论(0) 推荐(0) 编辑

2018年1月27日

关于Gateway

摘要: 为什么要有gateway?就是因为如果没有,很多的功能需要在在每个微服务中都实现,这样成本很高。 阅读全文

posted @ 2018-01-27 23:10 下士闻道 阅读(164) 评论(0) 推荐(0) 编辑

Kerberos的hive链接问题

摘要: javax.security.auth.login.LoginException: Checksum failed 之前碰到过类似的问题,都是因为服务器端的keytab问题;多半是因为重新生成了keytab后,客户端需要重新声场keytab;但是这次不是,即使我重新生成了客户端的keytab仍然无法 阅读全文

posted @ 2018-01-27 10:51 下士闻道 阅读(9869) 评论(2) 推荐(0) 编辑

上一页 1 ··· 26 27 28 29 30 31 32 33 34 ··· 70 下一页

导航