2013年4月18日

hadoop1.0.4+nutch1.6“单机”配置

摘要: ---恢复内容开始---首先声明:在能使用官方文档的情况下完成配置,就不要看网上的博客 另外此篇文章是基于伪分布式hadoop1.0.4 nutch1.6 PS:没有多的机器伤不起啊hadoop的环境配置见Ubuntu12.04下安装hadoop1.0.4nutch1.6:首先说个问题就是nutch1.6源文件中没有runtime这个文件夹,所以需要用到ant 1.安装ant sudo apt-get install ant 2.下载nutch1.6.src 并ant编译 解压,这里假设解压的路径为NUTCH_HOME 进入NUTCH_HOME,输入ant 等... 阅读全文

posted @ 2013-04-18 08:49 sleeper_qp 阅读(1901) 评论(3) 推荐(1) 编辑

2013年4月17日

[转]ubuntu 添加环境变量

摘要: 转自:http://hi.baidu.com/mario05/item/02b6d60ff7371136a2332a48ubuntu 添加环境变量Ubuntu Linux系统环境变量配置文件:/etc/profile : 在登录时,操作系统定制用户环境时使用的第一个文件 ,此文件为系统的每个用户设置环境信息,当用户第一次登录时,该文件被执行。/etc /environment : 在登录时操作系统使用的第二个文件, 系统在读取你自己的profile前,设置环境文件的环境变量。~/.profile : 在登录时用到的第三个文件 是.profile文件,每个用户都可使用该文件输入专用于自己使用的s 阅读全文

posted @ 2013-04-17 20:03 sleeper_qp 阅读(330) 评论(0) 推荐(0) 编辑

2013年3月25日

ubuntu下hadoop的重启后namenode无法启动的解决方法

摘要: 参考:Hadoop namenode无法启动 Hadoop Namenode不能启动(dfs/name is in an inconsistent state)原因:ubuntu每次重启都会删除/tmp中的信息,而namenode的格式化信息恰好存在/tmp下,从而导致相应信息丢失。解决办法: 1,新建tmp文件目录 sudo mkdir ~/hadoop/hadoop_tmp 2,修改hadoop/conf目录里面的core-site.xml文件 <property> <name>hadoop.tmp.dir</name> <... 阅读全文

posted @ 2013-03-25 16:43 sleeper_qp 阅读(2113) 评论(2) 推荐(0) 编辑

2013年3月23日

Ubuntu12.04下安装hadoop1.0.4

摘要: 首先声明:如果能通过官方文档安装就尽量用官方的方法。环境: linux :ubuntu 12.04 jdk:1.7.0_17jdk安装: 1,在官网下载最新jdk后,解压 tar -zxvf jdk.... 2(可省),把jdk放在/usr下 cp jdk /usr 3,修改/etc/profile :添加export JAVA_HOME=/usr/jdk1.7.0_17 export JRE_HOME=/usr/jdk1.7.0_17/jreexport PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATHexport CLASSPATH=$CLA... 阅读全文

posted @ 2013-03-23 15:25 sleeper_qp 阅读(1758) 评论(2) 推荐(0) 编辑

2013年3月20日

Read from socket failed: Connection reset by peer

摘要: 这是我在ssh localhost的时候出现的问题在网上搜了下解决方法,试了下各种方法包括重装ssh,但是还是不行。最后老老实实看/var/log/auth.log错误显示error: @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@error: @ WARNING: UNPROTECTED PRIVATE KEY FILE! @error: @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@error: Permissio... 阅读全文

posted @ 2013-03-20 20:59 sleeper_qp 阅读(5042) 评论(0) 推荐(0) 编辑

2012年12月20日

1.用lucene为数据库建索引

摘要: 一,lucene中比较基础的建立索引步骤(资料:http://www.ourys.com/post/lucene3-0_database_index.html)1.指定目录索引2.创建Directory对象(参数是存放索引的File类型,根据File的存放地点选择创建类)3.创建indexWriter对象,参数(Directory对象,分词器,是否创建,分词的最大值)4.获取源文件的File数组5.通过循环将每个文件写入索引。 创建Document对象,并创建Field对象(列名称(文件名、内容等)),将Field加入到Dcument中,通过IndexWriter.addDocument(D. 阅读全文

posted @ 2012-12-20 22:45 sleeper_qp 阅读(7337) 评论(0) 推荐(1) 编辑

2012年7月27日

2011 Asia Fuzhou Regional Contest C题 Bob’s Race hdu 4123&&poj 4003

摘要: 题意:给你一颗树,得到每个节点可到达的最远路径长度组成的序列,每给定一个q,求最长满足{最大值-最小值<=q}的连续序列思路: 1,树形DP得到序列 1.1 DFS 得到每个节点在其子树中“最大距离”以及“次大距离”<这里的最大距离和次大距离是说如果最大距离经历子节点a,那么次大距离就是不通过子节点a的最大距离,而不是除去最大距离的最大距离,这个地方就是求解最大距离的关键>; 1.2 DP求得每个节点通过其父节点的最大距离,更新最大距离; 2,单队列求最长序列 求最长序列是基于:求区间内最大,最小值以及决策单调性,可以用rmq甚至线段树View Code 1 #inclu.. 阅读全文

posted @ 2012-07-27 18:06 sleeper_qp 阅读(368) 评论(1) 推荐(0) 编辑

2012年7月23日

poj 1149 PIGS

摘要: 题意:给你m个猪圈以及每个猪圈里原来有多少头猪,先后给你n个人,每个人能打开一些猪圈并且他们最多想买Ki头猪,在每一个人买完后能将打开的猪圈中的猪顺意分配在这次打开猪圈里,在下一个人来之前 已打开的猪圈被锁上。 思路:这是第一道构图题,所以借鉴了大牛的思想<http://wenku.baidu.com/view/0ad00abec77da26925c5b01c.html>,按照朴素的思路先得到一个图 然后根据下面三个规律:得到最终的图:最终可以归纳出本题的构图规则:然后就是裸的最大流模板了View Code 1#include<stdio.h>2#include< 阅读全文

posted @ 2012-07-23 17:07 sleeper_qp 阅读(1649) 评论(0) 推荐(1) 编辑

2012年4月22日

2012NENU全国邀请赛

摘要: 不想写流水账,说说结果吧,铜。 不算理想,但也正常。 出的都是水题,某种意义上我全场打酱油。 和小明配合做了两道,当然最爽的是最后的那个白气球,这是这场比赛我们唯一的亮点吧。 K是树状DP,我还不会这块,今天还出了两道计算几何<姑且这么叫吧> 总体今天做题不兴奋,和校赛那天的感觉完全不一样。 第一次正式比赛结束了,收获: 一张参赛队员牌,一件衣服,一张纸。 还有差距。 sleeper_qp继续努力啊!!! fingting! 阅读全文

posted @ 2012-04-22 23:18 sleeper_qp 阅读(158) 评论(0) 推荐(0) 编辑

2012年4月18日

hdu 3669 Cross the Wall

摘要: Cross the WallTime Limit: 2000/1000 MS (Java/Others) Memory Limit: 327680/327680 K (Java/Others) Total Submission(s): 2988 Accepted Submission(s): 527 Problem Description“Across the Great Wall, we can reach every corner in the world!” Now the citizens of Rectland want to cross the Great Wa... 阅读全文

posted @ 2012-04-18 16:46 sleeper_qp 阅读(865) 评论(0) 推荐(0) 编辑

导航