gxg123

摘要： 最近在做CM和CDH的安装遇到了在安装的过程当中出现了主机运行状态不良的情况，截图如下： 出现这个首先想到的是这台机器的启动的过程当中考虑除了问题（因为我装了好多次，考虑集群环境被污染了） 然后在网上找到说删除一个文件即可，删除的问题文件如下： 阅读全文

摘要： 今天在做项目的过程当中发现，我们在使用mybatis从数据库中拿数据。但是死活不能转化成我们想要的形式。 然后在网上查了相关的资料； 基本的转化如下： 这里使用的是将数据转换成number类型，然后保留两位小数的形式。 这里是将数据转换成为decimal类型，然后保留两位小数的形式。 这里是将数据转 阅读全文

摘要： 今天在做一个实验的时候碰到了关于group by 和partition by 的区别，简单的总结一下。 实验的题目是，按照类型进行分组，然后对其金额进行累加。然后输出类型对应的金额总和： 这个输出的结果是按照不同的交易类型，然后对金额进行累加。 这个是用 PARTITION BY进行分组，然后统计。 阅读全文

摘要： 今天看别人的代码，突然发现之前理解的sql的with as的用法有新的理解。 之前理解的with as只是想着做单表的union all 操作时才使用，今天发现在可以使用逗号做分割，做缓存不同的表数据。 下面的例子如下： 在这里做了三个缓存的表，然后就对三个缓存表中的数据全部查询出来。查询的结果如下 阅读全文

摘要： 今天领导让我把当前的input框当中的时间设置为当前日期。于是就找相关的资料，最后解决了，在这里记录一下： <label class="label-text">至</label> <input id="endDate" name="endDate" dateCheck="dateCheck" cla 阅读全文

摘要： 今天突然在网上看到别人的面试题，觉得有点好奇想做一下，突然发现sql server的语法对于hive是不适用的。于是各种查资料。 然后发现hive中没有直接获取到当前时间的函数，而且对于时间定义的函数特别少，问题解决起来还是有难度。 下面介绍hive获取时间的方式： 题目：给定一张表（列有月份，销售 阅读全文

摘要： 最近的web项目当中遇到自己自定义的xml文件，但是在启动的时候报错。找了半天的原因也不知道在哪里。 报的错误如下： Caused by: org.apache.ibatis.builder.BuilderException: Error parsing Mapper XML. Cause: jav 阅读全文

摘要： 最近碰到有人问我，一个hql当中，如果有一个join，然后 有一个group by 操作。这个时候的map有多少个； 其实之前也看执行计划。今天有空就研究了一下，一看这里面的学问还真的不少。下面就以一个例子来说明： STAGE DEPENDENCIES: Stage-5 is a root stag 阅读全文

摘要： 今天在测试在写hive sql的时候注意到在进行查询的时候我们把order by放在后面，前面如果没有这个字段，则执行报错。 他就会报下面的错误。其实这个时候我们就想着是不是哪里写错了。但是仔细一看。好像并没有错误。 这个时候我们就可能会想是不是因为在hive当中语句的执行顺序有问题。于是我在前面s 阅读全文

摘要： 我们都知道在进行hive的查询的时候，设置合理的reduce个数能够使计算的速度加快。 具体的提高速度的方法有下面这些： (1) hive.exec.reducers.bytes.per.reducer（每个reduce任务处理的数据量，默认为1000^3=1G） hive.exec.reducer 阅读全文