上一页 1 ··· 4 5 6 7 8 9 10 下一页

2016年9月14日

使用python实现两个文件夹里文件的对比(包含内容的对比)

摘要: #-*-coding:utf-8-*- # # 目录对比工具(包含子目录 ),并列出# 1、A比B多了哪些文件 # 2、B比A多了哪些文件 # 3、二者相同的文件:文件大小相同 VS 文件大小不同 (Size相同文件不打印:与Size不同文件显示未排序)# import os, time,diffl 阅读全文

posted @ 2016-09-14 15:50 猫儿爹 阅读(20766) 评论(0) 推荐(2) 编辑

mapreduce-实现多表关联

摘要: //map package hadoop3; import java.io.IOException; import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop. 阅读全文

posted @ 2016-09-14 15:45 猫儿爹 阅读(2795) 评论(0) 推荐(0) 编辑

mapreduce-实现单表关联

摘要: //map类 package hadoop3; import java.io.IOException; import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop 阅读全文

posted @ 2016-09-14 15:42 猫儿爹 阅读(788) 评论(0) 推荐(0) 编辑

kali_linux学习笔记

摘要: kali linux ssh登陆: 一、配置SSH参数 修改sshd_config文件,命令为: vi /etc/ssh/sshd_config 将#PasswordAuthentication no的注释去掉,并且将NO修改为YES //kali中默认是yes 将PermitRootLogin w 阅读全文

posted @ 2016-09-14 15:36 猫儿爹 阅读(1065) 评论(0) 推荐(0) 编辑

docker学习笔记

摘要: yum install libdevmapper* -y 217 yum install http://ftp.riken.jp/Linux/fedora/epel/6/i386/epel-release-6-8.noarch.rpm centos7.0##yum install libdevmap 阅读全文

posted @ 2016-09-14 15:34 猫儿爹 阅读(129) 评论(0) 推荐(0) 编辑

scala 学习笔记

摘要: val x:T val x:T=e 声明一个常量var x:T var x:T=e 声明一个变量 def abc(x:T):T=edef adder(m:T,n:T)=m+n 数值类型:整型值:Int Long Short Byte浮点型:Double,Float布尔值:Boolean(true/f 阅读全文

posted @ 2016-09-14 15:29 猫儿爹 阅读(230) 评论(0) 推荐(0) 编辑

spark-shell学习笔记

摘要: 1. val lines=sc.textFile("hdfs://") ==加载进来成为RDD Resilient distributed dataset 弹性数据集 val errors=lines.filter(_.startsWith("ERROR")) ##transformation va 阅读全文

posted @ 2016-09-14 15:29 猫儿爹 阅读(677) 评论(0) 推荐(0) 编辑

hadoop-hive学习笔记

摘要: create table hive_1(id string,name string ,gender string)row format delimited fields terminated by ','stored as TEXTFILE; load data local inpath '/luo 阅读全文

posted @ 2016-09-14 15:27 猫儿爹 阅读(239) 评论(0) 推荐(0) 编辑

hadoop-pig学习笔记

摘要: A1 = LOAD '/luo/lzttxt01.txt' AS (col1:chararray,col2:int,col3:int,col4:int,col5:double,col6:double);B1 = GROUP A1 BY (col2,col3,col4);C1 = FOREACH B1 阅读全文

posted @ 2016-09-14 15:27 猫儿爹 阅读(212) 评论(0) 推荐(0) 编辑

hadoop-hbase学习笔记

摘要: create "t",{NAME=>"t_id"},{NAME=>"t_vl"} describe "t" disable "t" alter "t",{NAME=>"t_info",VERSIONS=>3} put "t","1001","t_vl:age","25" //1001是rowkey 阅读全文

posted @ 2016-09-14 15:26 猫儿爹 阅读(221) 评论(0) 推荐(0) 编辑

上一页 1 ··· 4 5 6 7 8 9 10 下一页

导航