2016年8月9日
摘要：
private static String concat(String tag,String Time) { // TODO Auto-generated method stub // return new StringBuilder(tag.length() + Time.length()) // .append(tag).append(Time).toString(); retu... 阅读全文
摘要：
public static boolean isAngle(String str){ if(str.getBytes().length==str.length()){ //全是半角 return true; } return false; ... 阅读全文
摘要：
public static int appearNumber(String srcText, String findText) { int count = 0; int index = 0; while ((index = srcText.indexOf(findText, index)) != -1) { index... 阅读全文
摘要：
public static boolean isContainChinese(String str) { Pattern p = Pattern.compile("[\u4e00-\u9fa5a-zA-Z]"); Matcher m = p.matcher(str); if (m.find()) { return t... 阅读全文
摘要：
public static boolean isMobile(String str) { Pattern p = null; Matcher m = null; boolean b = false; p = Pattern.compile("^[1][3,4,5,8][0-9]{9}$"); // 验证手机号 ... 阅读全文
摘要：
Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。 这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooK 阅读全文
摘要：
core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml hadoop-env.sh hive-env.sh hive-site.xml hbase-site.xml zoo.cfg 阅读全文
摘要：
之前在网上搜索到的全部单位好像都是byte的，看起来很麻烦，然后自己看了下 hadoop fs -help hadoop fs -du -h / hadoop fs -du -h /tmp 很简单明了，前面的数字即为目录所占空间的大小，后面的因为我前期 备份数为3 后期改为2 所以可能会不一样 阅读全文
摘要：
两天时间，知道现在才把这个东西解决 解决的灵感来源于百度知道一句话谢谢这个哥们 谢谢这个哥们！ 谢谢这个哥们！ 我的目录是在/home/hadoop/tmp 大家如果遇到这个问题，希望能按照我的办法去试一下 2016年1月18日04:00:49 阅读全文
摘要：
zoo.cfg 1、server.1/2/3 有几台配置几个 2、配置好hosts映射之后可以用node1替代IP地址 3、dataLogDir 下面配置的logs 的目录一定要创建 4、dataDir 配置的目录下面一定要创建一个文本，里面写上server.（点）之后那个数字，每个节点都要写 5 阅读全文
摘要：
MySQL无法select 和 delete,update同时进行 只有将group By 出来不重复的数据进行insert到一张和之前同样类型的新表里面 转换思路，解决问题！ 阅读全文
摘要：
1、截取 65534条数据，进行分sheet，然后1个sheet导入一张表，最后进行整合！ 2、采用TXT导入方式，TXT的导入暂时没发现限制的数据条数，下午用TXT导入74万条数据成功 3、如果遇到log型的日志导入MySQL，可以直接复制成TXT，然后利用分隔符加上表头进行导入 阅读全文
摘要：
在eclipse下配置hadoop location的时候 hadoop端口号应该与conf文件夹下的core-site.xml以及mapred-site.xml保持一致 前者对应dfs master，后者对应map-red master //这是mapred-site.xml mapred.job.tracker http://master.hadoop:90... 阅读全文
摘要：
UPDATE `bj_agent_new` SET Compay= CONCAT(substring_index(`Compay`,'开发商',1),'开发商') WHERE Compay LIKE '%开发商%'; sql附上 阅读全文
摘要：
log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j:WARN Please initialize the log4j system properly. log4j:WARN See http://logging.apach... 阅读全文
摘要：
转载： 大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有各的用处，互相之间又有重合。你可以用汤锅直接当碗吃饭喝汤，你可以用小刀或者刨子去皮。但是每个工具有自己的特性，虽然奇怪的组合 阅读全文
摘要：
1、数据已经load进去hdfs 2、hive、hbase已经安装成功（我用的是hadoop 2.4 hbase 0.98.12 hive 1.2.1） 3、开始！ 4、在hive建立表同时生成对应的一张Hbase表，分别在hive和hbase用show tables;和list查看是否生成对应的表 create table hive3 (key string,phone string... 阅读全文
摘要：
最近用本地Navicat连接集群的mysql，报了上述的错误，我认为是权限问题 之前试过赋权限给所有人，但是我这边还是连接不上，无奈，试试只分给我一个IP 开始：mysql -uroot -p //先登录mysql 我用的root用户 登录成功 mysql> 然后开始赋权限： 1、GRANT A 阅读全文
摘要：
oracle获取字符串长度函数length()和hengthb() lengthb(string)计算string所占的字节长度：返回字符串的长度，单位是字节 length(string)计算string所占的字符长度：返回字符串的长度，单位是字符 对于单字节字符,LENGTHB和LENGTH是一样的. 如可以用length(‘string’)=lengthb(‘string’)判断... 阅读全文
摘要：
配置外网和内网的映射，内部所有配置全部用内网的IP 本地所有配置皆为外网地址 本地给服务器发指令全部由映射转换为内网指定IP，即可 阅读全文
