摘要: 操作环境: java版本: jdk 1.7以上 hbase 版本:1.2.x hadoop版本:2.6.0以上实现功能: 1,创建指定表 2,删除指定表 3,根据表名,行键,列族,列描述符,值插入数据 4,根据指定表获... 阅读全文
posted @ 2017-06-02 12:52 zhou_jun 阅读(540) 评论(1) 推荐(0) 编辑
摘要: 一,NameNode: 1, Namenode是中心服务器,单一节点(简化系统的设计和实现),负责管理文件系统的名称空间(namespace)以及客户端对文件的访问。 2, 文件操作,Namenode负责文件元数据的操作,DataNode负责处理文件内容... 阅读全文
posted @ 2017-06-02 12:37 zhou_jun 阅读(2581) 评论(0) 推荐(0) 编辑
摘要: python学习,实战学习,函数的学习与使用,综合知识的运用。包括for ,while循环,if...else.. 和if... elif ... else 的条件判断! 问题描述:书写一个创建有针对性的专用密码字典的程序,其中包括的功能模块有: 0,退出程序 1,输入密码原始字符串 2,添加非法字 阅读全文
posted @ 2017-06-01 23:33 zhou_jun 阅读(620) 评论(0) 推荐(0) 编辑
摘要: 在linux的shell中 if 语句通过关系运算符判断表达式的真假来决定执行哪个分支。Shell 有三种 if ... else 语句: 1) if ... else 语句 if ... else 语句的语法: 注意:如果 expression 返回 true,then 后边的语句将会被执行;如果 阅读全文
posted @ 2017-05-30 23:32 zhou_jun 阅读(9949) 评论(0) 推荐(0) 编辑
摘要: 在linux中判断文件,目录是否存在或则具有的权限,根据最近的学习以及网上的资料,进行了以下的总结: #!/bin/sh myPath="/var/log/httpd/" myFile="/var /log/httpd/access.log" #这里的-x 参数判断$myPath是否存在并且是否具有可执行权限 if [ ! -x "$myPath"]; then ... 阅读全文
posted @ 2017-05-30 23:25 zhou_jun 阅读(2774) 评论(0) 推荐(0) 编辑
摘要: 在书写linux shell 脚本我们经常会遇到,对一个字符串是否为空进行判断,下面我对几种常用的方法进行了一个总结: 1.-z判断 2.加一个字符串再比较 3.直接使用变量判断 注意:都要代双引号,否则有些命令会报错,在实际使用linux命令的时候,一定要记得注意这些符号,及语法的规则! 阅读全文
posted @ 2017-05-30 23:16 zhou_jun 阅读(11138) 评论(1) 推荐(2) 编辑
摘要: 错误信息:17/05/20 18:51:39 ERROR JobScheduler: Error running job streaming job 1495277499000 ms.0org.apache.spark.SparkException: Task not... 阅读全文
posted @ 2017-05-20 18:53 zhou_jun 阅读(4774) 评论(0) 推荐(0) 编辑
摘要: 问题描述:在输入文件中,有多个,其中每个输入文件代表一个学生的各科成绩,其中每行的数据形式为,你需要将每个文件中的每科目的成绩进行统计,然后求平均值。输入文件格式:这里有三个学生:输出文件格式:实例代码:package com.test;import java.io.... 阅读全文
posted @ 2017-05-19 10:54 zhou_jun 阅读(1572) 评论(0) 推荐(0) 编辑
摘要: 入门训练:WordCount 问题描述:对一个或多个输入文件中的单词进行计数统计,比如一个文件的输入文件如下 输出格式:运行代码实例:package hadoopLearn;import java.io.IOException;import java.net.UR... 阅读全文
posted @ 2017-05-19 10:28 zhou_jun 阅读(867) 评论(0) 推荐(0) 编辑
摘要: 最近遇到一个问题,不知怎么突然运行hadoop的map程序报错,困扰了我很久,现在来给大家分享分享。。错误信息2017-05-18 21:34:22,104 INFO [main] client.RMProxy (RMProxy.java:createRMProxy... 阅读全文
posted @ 2017-05-18 21:33 zhou_jun 阅读(416) 评论(0) 推荐(0) 编辑