摘要：
环境 centos 6.5 JDK 8 CDH 5.16CDH 通过CM安装,而不是独立安装组件包;CM移除节点登录web管理界面执行: 主机->所有主机->勾选主机->已选定的操作:停止主机上的角色执行: 主机->所有主机->勾选主机->从群集中删除:勾选"解除授权角色"和"跳过管理角色"执行: 阅读全文
摘要：
从别处拷贝来的maven项目，有时候会出现不能debug关联的情况，即按住ctrl键后不能跳转到相应的类或方法，这是需要eclipse环境生成 Eclipse 项目文件的。 可以在cmd命令窗口下进入到maven项目包含pom.xml文件的目录下，运行 mvn eclipse:eclipse 命令即 阅读全文
摘要：
数据质量分析 脏数据包括：缺失值；异常值；不一致的值；重复数据及含有特殊符号的数据； 1.缺失值处理 统计缺失率，缺失数 2.异常值处理 （1）简单统计量分析 （2）3Q原则 正态分布情况下，小概率事件为异常值 不服从正太分布的，可以用原离平均值多少倍标准差来分析 （3）箱线图分析 使用descri 阅读全文
摘要：
1. 相关目录 /var/log/cloudera-scm-installer : 安装日志目录。/var/log/* : 相关日志文件（相关服务的及CM的）。/usr/share/cmf/ : 程序安装目录。/usr/lib64/cmf/ : Agent程序代码。/var/lib/cloudera 阅读全文
摘要：
这个问题是由什么引起的呢？如果集群中，有二个datanode，而有3个副本的话，就会出现这样的问题。 1，副本数据小于等于datanode数 2，命令修改已有的副本数 修改副本数后不会若自动删除多余副本，怎需要执行以下命令 su - hdfs # "/" 指的是hdfs目录 hadoop fs -s 阅读全文
摘要：
1、F7 单步调试，进入函数内部。 相当于eclipse的f5就是 进入到代码 2、F8 单步调试，不进入函数内部。 相当于eclipse的f6 跳到下一步3、F9 继续执行，进入下一个断点或执行完程序 4、Shift+F7 选择要进入的函数5、Shift+F8 跳出函数 6、Alt+F8 执行表达 阅读全文
摘要：
建表 CREATE TABLE `score` ( `id` INT(5) NOT NULL AUTO_INCREMENT, `name` VARCHAR(20) NULL DEFAULT NULL COLLATE 'utf8_general_ci', `obj` VARCHAR(20) NULL 阅读全文
摘要：
<dependency> <groupId>com.alibaba</groupId> <artifactId>fastjson</artifactId> <version>1.2.60</version> </dependency> JSON_OBJ_STR = "{"studentName":" 阅读全文
摘要：
首先在resources目录创建自定义的配置文件 配置文件的格式： 写工具类，得到配置参数 import java.io.IOException; import java.io.InputStream; import java.util.Properties; public class MyConf 阅读全文
摘要：
我的kafka是CDH上的2.11版本 在linux客户端启动了kafka自带的producer 和consumer后能正常生产和消费 但是， 在idea启动了自定义的生产者向kafka发送数据的时候报： WARN Error while fetching metadata with correla 阅读全文