摘要： hg （一个分布式管理工具）。TortoiseHg是在windows上的。使用：>yum install mercurial-hgk.x86_64 //安装。1 sudo useradd hgrepo -d /home/hgrepo 2 cd /home/hgrepo/ 3 mkdir project.hg 4 cd project.hg/ 5 hg init 6 ls 7 echo "hello,mercurial">sample.txt 8 ls 9 hg add 10 hg ci 11 ls 12 hg ci ... 阅读全文

摘要： ldconfig deferred processing now taking place正在处理用于 libapache2-mod-php5 的触发器...* Reloading web server config apache2: Could not reliably determine the server's fully qualified domain name, using 127.0.1.1 for ServerName [ OK ]ERROR 1045 (28000): Access denied for user 'root'@'localho 阅读全文

摘要： 遇到的java 运行时错误：NullPointerException空指针 ，简单地说就是调用了未经初始化的对象或者是不存在的对象，这个错误经常出现在创建图片，调用数组这些操作中，比如图片未经初始化，或者图片创建时的路径错误等等。对数组操作中出现空指针，很多情况下是一些刚开始学习编程的朋友常犯的错误，即把数组的初始化和数组元素的初始化混淆起来了。数组的初始化是对数组分配需要的空间，而初始化后的数组，其中的元素并没有实例化，依然是空的，所以还需要对每个元素都进行初始化（如果要调用的话）遇到一个错误：No enclosing instance of type Employee is accessi 阅读全文

摘要： 1 public int getPartition(IntWritable key,IntWritable value,int numPartitions){ 2 int Maxnumber = 12345; 3 int bound = Maxnumber/numPartitions +1; 4 int keynumber = key.get(); 5 6 System.out.println("numPartition:"+numPartitions); 7 ... 阅读全文

摘要： Bloom Filter就是这么一个空间利用率非常高的算法。我们先来看看这个算法的原理：1 首先我们有一个长度为n的比特数组，开始的时候将这个比特数组里所有的元素都初始化为000000000000000000000上面的比特数组n为202 然后选取k个哈希函数，这k个哈希函数产生的结果的值的范围在0到n-1之间（对于上面的比特数组，即0到19） 。对每个要添加进集合的对象进行哈希运算，然后将哈希计算结果作为数组的索引，将索引位置的比特位设置为1（不管该比特位原先为0还是为1）。比如我们选取三个哈希函数，对于对象A哈希值为0，5，7。那么比特数组就为：10000101000000000000对象 阅读全文

摘要： 1,写一个java代码。*.java.(这里从example 拷贝一个过来作为测试）cp src/examples/org/apache/hadoop/examples/WordCount.java . 2,编译文件javac -classpath hadoop-core-1.2.1.jar -d FirstJar WordCount.java （这里出错。换用下面的命令：）javac -classpath hadoop-core-1.2.1.jar:lib/commons-cli-1.2.jar -d FirstJar WordCount.java 3,编译完成后，对编译好的class打包j 阅读全文

摘要： DFS loaction:/tmp 文件下的 hadoop-haoop/mapred/system报AccessControlException。解决： bin/hadoop fs -chmod -R 777 /tmp 放开权限。 阅读全文

摘要： 在这篇文章中，我们默认认为Hadoop环境已经由运维人员配置好直接可以使用。假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。启动与关闭启动HADOOP进入HADOOP_HOME目录。执行sh bin/start-all.sh进入HADOOP_HOME目录。执行sh bin/stop-all.sh关闭HADOOP文件操作Hadoop使用的是HDFS，能够实现的功能和我们使用的磁盘系统类似。并且支持通配符，如*。查看文件列表查看hdfs中/user/admin/aaron目录下的文件。进入HADOOP_HOME目录。执行sh bin/hadoop fs -l 阅读全文

摘要： /opt/hadoop/src/contrib/eclipse-plugin/build.xml:61: warning: 'includeantruntime' was not set, defaulting to build.sysclasspath=last; set to false for repeatable builds [javac] Compiling 45 source files to /opt/hadoop/build/contrib/eclipse-plugin/classes [javac] /opt/hadoop/src/contrib/eclip 阅读全文

摘要： 列出HDFS下的文件：hadoop@dingqi-ubuntu:/opt/hadoop$ bin/hadoop fs -ls /Found 1 itemsdrwxr-xr-x - hadoop supergroup 0 2013-10-28 19:53 /tmp列出/tmp文档中的文件：hadoop@dingqi-ubuntu:/opt/hadoop$ bin/hadoop fs -ls /tmpFound 1 itemsdrwxr-xr-x - hadoop supergroup 0 2013-10-28 19:53 /tmp/hadoop-hadoop创建文件夹:hadoop@dingqi 阅读全文