11 2015 档案

maven导入外部包pom.xml配置
摘要：com.hadoop hadoop-lzo 0.4.17-SNAPSHOT system D:\\Data\\opscenter\\tools\\bigdata\\hadoop-lzo-0.4.17-SNAPSHOT.jar 阅读全文
posted @ 2015-11-27 11:49 宝山方圆 阅读(972) 评论(0) 推荐(0) 编辑
【转】MapReduce读取lzo文件
摘要：1.读lzo文件需要添加以下代码，并导入lzo相关的jar包job.setInputFormatClass(LzoTextInputFormat.class);2.写lzo文件lzo格式默认是不支持splitable的，需要为其添加索引文件，才能支持多个map并行对lzo文件进行处理如果希望redu... 阅读全文
posted @ 2015-11-27 11:19 宝山方圆 阅读(784) 评论(0) 推荐(0) 编辑
【转】Linux删除文件未释放空间问题处理
摘要：linux里的文件被删除后，空间没有被释放是因为在Linux系统中，通过rm或者文件管理器删除文件将会从文件系统的目录结构上解除链接(unlink).然而如果文件是被打开的(有一个进程正在使用)，那么进程将仍然可以读取该文件，磁盘空间也一直被占用。解决方法：1、先df -lh查看一下磁盘使用状况2、... 阅读全文
posted @ 2015-11-09 05:47 宝山方圆 阅读(234) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示