2013 年 1月随笔档案 - 代码王子

ant的基本说明

摘要：Ant是一个Apache基金会下的跨平台的构件工具，它可以实现项目的自动构建和部署等功能。在本文中，主要让读者熟悉怎样将Ant应用到Java项目中，让它简化构建和部署操作。一．安装与配置下载地址：http://ant.apache.org/，在本文中下载的是1.7.0版本。解压到某个目录（... 阅读全文

posted @ 2013-01-29 15:47 代码王子阅读(220) 评论(0) 推荐(0) 编辑

ant的简明教程，后面运行写的不错

摘要：1. Ant简介：这里引用Ant帮助文档中对Ant的介绍： Apache Ant是一个基于Java的构建工具。从理论上讲，也是一种类似于Make的工具，只是去除了Make工具的缺点。既然已经有了make, gnumake, nmake, jam以及其他的构件工具，为什么还要Ant呢... 阅读全文

posted @ 2013-01-29 15:23 代码王子阅读(187) 评论(0) 推荐(0) 编辑

gcc的基本使用方法

摘要：初学时最好从命令行入手，这样可以熟悉从编写程序、编译、调试和执行的整个过程。编写程序可以用vi或其它编辑器编写。编译则使用GCC命令。要往下学习首先就得熟悉GCC命令的用法。 GCC命令提供了非常多的命令选项，但并不是所有都要熟悉，初学时掌握几个常用的就可以了，到后面再慢慢学习其它选项，免得因选... 阅读全文

posted @ 2013-01-25 15:17 代码王子阅读(517) 评论(0) 推荐(0) 编辑

LINUX nautilus 命令

摘要：在cent os上，想要将终端上某个目录的文件拷贝到桌面上，通过filesystem去查找很麻烦，也很难找到对应路径。这个问题可以通过 nautilus命令解决，进入拷贝文件的目录中，在当前位置上键入 nautilus命令，会以窗口形式打开当前目录。在linux命令行界面中，也就是终端上，... 阅读全文

posted @ 2013-01-23 11:19 代码王子阅读(531) 评论(0) 推荐(0) 编辑

linux中用到的命令

摘要：shell脚本： 1，date 命令： beg_s=`date -d "$datebeg" +%s` dateitem=`date -d @$beg_s +"%Y-%m-%d"` 其中，-d是将时间数据变成秒的形式。但是，@不能少，是将变量变成制定格式！ http://ba... 阅读全文

posted @ 2013-01-17 21:27 代码王子阅读(108) 评论(0) 推荐(0) 编辑

vim中设置pig高亮

摘要：http://www.vim.org/scripts/script.php?script_id=2186 中有详细介绍。两步操作 install details 1) copy pig.vim file into your ~/.vim/syntax/ directory; 2)... 阅读全文

posted @ 2013-01-16 14:26 代码王子阅读(140) 评论(0) 推荐(0) 编辑

which与whereis区别

摘要：which 查看可执行文件的位置 whereis 查看文件的位置 locate 配合数据库查看文件位置 find 实际搜寻硬盘查询文件名称 1、which 语法： [root@redhat ~]# which 可执行文件名称例如： [root@redhat ~... 阅读全文

posted @ 2013-01-16 13:33 代码王子阅读(511) 评论(0) 推荐(0) 编辑

linux 下的ps与jps

摘要：jps(Java Virtual Machine Process Status Tool)是JDK 1.5提供的一个显示当前所有java进程pid的命令，简单实用，非常适合在linux/unix平台上简单察看当前java进程的一些简单情况。 unix系统里的ps命令，这个命令主要是用来显示当前系... 阅读全文

posted @ 2013-01-16 10:36 代码王子阅读(336) 评论(0) 推荐(0) 编辑

pig中distinct用法

摘要：Distinct 只能处理关系中的整个记录，不能是表达式，或者部分域。 --distinct.pig daily = load 'NYSE_daily' as (exchange:chararray, symbol:chararray); uniq = distinct daily;... 阅读全文

posted @ 2013-01-11 20:13 代码王子阅读(137) 评论(0) 推荐(0) 编辑

简单的hadoop配置（我安装的问题）

摘要：一篇讲的非常详细的hadoop集群配置信息：http://blog.csdn.net/hguisu/article/details/7237395 从运维角度出发的hadoop配置，深入学习，有了很大提高http://www.cnblogs.com/xia520pi/archive/2012/... 阅读全文

posted @ 2013-01-11 16:27 代码王子阅读(120) 评论(0) 推荐(0) 编辑

hadoop 统计一个目录的文件大小

摘要：du 使用方法：hadoop fs -du URI [URI …] 指定目录时，显示该目录中所有文件的大小，而当只指定一个文件时，只显示此文件的大小。示例： hadoop fs -du /user/hadoop/dir1 返回值：成功返回0，失败返回-1。 dus 使用方法：hadoo... 阅读全文

posted @ 2013-01-11 15:59 代码王子阅读(257) 评论(0) 推荐(0) 编辑

hadoop不能用root用户启动，会报错

摘要：[Hadoop]问题记录：Hadoop在root用户下启动错误：File /user/root/input/slaves could only be replicated to 0 nodes, in 分类：分布式计算2011-08-03 11:341... 阅读全文

posted @ 2013-01-10 22:17 代码王子阅读(1101) 评论(0) 推荐(0) 编辑

hadoop基本配置信息

摘要：获取默认配置：引自http://www.cnblogs.com/ggjucheng/archive/2012/04/17/2454590.html 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文... 阅读全文

posted @ 2013-01-10 16:42 代码王子阅读(146) 评论(0) 推荐(0) 编辑

pig中将两列合并为一列：concat

摘要：aggregate=congregate 在新任务中，需要统计两个属性组成的集合，对应有多少个unique 元组。在pig中统计是很恶心的事，必须先group （详见http://blog.csdn.net/longshenlmj/article/details/8481932）我想通过... 阅读全文

posted @ 2013-01-08 16:53 代码王子阅读(210) 评论(0) 推荐(0) 编辑

pig中对元组不能直接使用聚集函数（如COUNT）

摘要：pig中想要使用统计等aggregate函数，必须先group，再进行。而如何设计group也就成了一个相对麻烦的过程，这给程序设计造成了不小的麻烦。所以pig很强大，但其语法还是有些晦涩，存在很大进步空间。 pig和sql不同，在sql中，可以直接对当前表使用aggregate函数，如cou... 阅读全文

posted @ 2013-01-08 16:43 代码王子阅读(114) 评论(0) 推荐(0) 编辑

pig对应sql的基本命令

摘要：1.从文件导入数据 1)Mysql (Mysql需要先创建表). CREATE TABLE TMP_TABLE(USER VARCHAR(32),AGEINT,IS_MALE BOOLEAN); CREATE TABLE TMP_TABLE_2(AGE INT,OPTIONSVARCHAR(50... 阅读全文

posted @ 2013-01-07 18:13 代码王子阅读(152) 评论(0) 推荐(0) 编辑

pig中cogroup的使用

摘要：%default file test.txt A = load '$file' as (date, web, name, food); B = load '$file' as (date, web, name, food); C= cogroup A by $0, B by $1; des... 阅读全文

posted @ 2013-01-07 18:10 代码王子阅读(244) 评论(0) 推荐(0) 编辑

代码王子

01 2013 档案