摘要: Mark 下,周末来补充 参考资料: https://stedolan.github.io/jq/tutorial/ 阅读全文
posted @ 2017-11-22 11:47 LiuWei_Find 阅读(552) 评论(0) 推荐(0) 编辑
摘要: 1. 使用下面命令安装 2. 编辑配置信息 注意:set from那里的邮箱名称和set smtp-auth-user那里的邮箱名称保持一致,否则可能会出现553的错误提示 另外邮箱密码那里,163邮箱需要在设置-客户端授权密码那里开启,否则可能会出现500错误,想见参考链接邮箱不可用 550 Us 阅读全文
posted @ 2017-03-27 15:16 LiuWei_Find 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 接着昨天的继续看hadoop-yarn-api,昨天看了api package下的4个协议,今天来看下con package下的代码 conf目录下的内容比较少,就4个文件分别是ConfigurationProvider, ConfigurationProviderFactory,HAUtil以及Y 阅读全文
posted @ 2016-09-20 10:17 LiuWei_Find 阅读(596) 评论(0) 推荐(0) 编辑
摘要: Hadoop 2.6.0下面的关于Yarn工程,如下所示,主要有以下七个module: hadoop-yarn-server-application hadoop-yarn-server-common:resource manager 和node manager 共享的API hadoop-yarn 阅读全文
posted @ 2016-09-12 20:04 LiuWei_Find 阅读(2241) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/zhanggang807/article/details/45956325 最近在复习Java GC,因为G1比较新,JDK1.7才正式引入,比较艰难的找到一篇写的很棒的文章,粘过来mark下。总结这篇文章和其他的资料,G1可以基本稳定在0.5s到1s 阅读全文
posted @ 2016-08-22 23:51 LiuWei_Find 阅读(3773) 评论(0) 推荐(0) 编辑
摘要: 转自:http://www.open-open.com/lib/view/open1400644430159.html Hive跟Impala貌似都是公司或者研究所常用的系统,前者更稳定点,实现方式是MapReduce,因为用Hue的时候,在groupby中文的时候,出现了点问题,并且看到写很长的S 阅读全文
posted @ 2016-08-08 21:43 LiuWei_Find 阅读(1885) 评论(0) 推荐(0) 编辑
摘要: 之前解析LXML,用的是XPath,现在临时被抓取写爬虫,接人家的代码,看到用的是BeautifulSoup,稍微学了下,也挺好用的,简单记录下用法,有机会做下和Xpath的对比测试 初始化 得到soup之后,就开始提取一些比较有用的信息,比如标题:可以直接使用 得到的结果,是带标签的,类似这种形式 阅读全文
posted @ 2016-05-19 11:10 LiuWei_Find 阅读(193) 评论(0) 推荐(0) 编辑
摘要: 昨天看到了AbstractFileSystem,也知道应用访问文件是通过FileContext这个类,今天来看这个类的源代码,先看下这个类老长的注释说明 1 /** 2 * The FileContext class provides an interface to the application 阅读全文
posted @ 2016-03-28 23:30 LiuWei_Find 阅读(332) 评论(0) 推荐(0) 编辑
摘要: 转:http://blog.csdn.net/dyx404514/article/details/42061017 Manacher算法 算法总结第三弹 manacher算法,前面讲了两个字符串相算法——kmp和拓展kmp,这次来还是来总结一个字符串算法,manacher算法,我习惯叫他 “马拉车” 阅读全文
posted @ 2016-03-28 22:26 LiuWei_Find 阅读(224) 评论(0) 推荐(0) 编辑
摘要: HDFS声明及构造函数 Hdfs继承了AbstractFileSystem这个抽象类,其中有一个静态块,执行HdfsConfiguration的初始化方法,我们先来看下这个方法 init是一个空函数,它存在的作用,只是为了类加载,当类加载的时候,静态块中的方法将会执行从而增加过时的Key和Resou 阅读全文
posted @ 2016-03-27 23:04 LiuWei_Find 阅读(533) 评论(0) 推荐(0) 编辑