摘要：
一、背景Hadoop中实现了用于全局排序的InputSampler类和TotalOrderPartitioner类，调用示例是org.apache.hadoop.examples.Sort。但是当我们以Text文件作为输入时，结果并非按Text中的string列排序，而且输出结果是SequenceF... 阅读全文
posted @ 2014-05-14 14:12 Y.Cloud 阅读(5268) 评论(0) 推荐(0) 编辑
摘要：
一、版本对比公司版Mahout由于Mahout只能允许于hadoop0.20以上版本上，而百度的hadoop是hadoop0.19的一个分支。因此百度HPC组曾经将Mahout移植到百度的hadoop集群。Mahout上古版本，只有itembased一种算法，且只能用于百度版hadoop。开源Mah... 阅读全文
posted @ 2014-05-14 13:04 Y.Cloud 阅读(2328) 评论(0) 推荐(0) 编辑
摘要：
按数值排序示例：按气温字段对天气数据集排序问题：不能将气温视为Text对象并以字典顺序排序正统做法：用顺序文件存储数据，其IntWritable键代表气温，其Text值就是数据行常用简单做法：首先，增加偏移量以消除所有负数；其次，在数字面前加0，使所有数字的长度相等；最后，用字典法排序。stream... 阅读全文
posted @ 2014-05-04 12:50 Y.Cloud 阅读(9282) 评论(0) 推荐(1) 编辑
摘要：
本人在csdn的博客莫名其妙地被封了（http://blog.csdn.net/fty8788），非常郁闷。回忆起，可能是我近半年由于工作事情忙很少写博客了，被某213盗用发了不恰当的东东。我也查不到是不是发了什么私信、评论，只看到多了几篇莫名其妙的博客。可csdn居然直接封了我的博客，原来的文章一... 阅读全文
posted @ 2014-05-03 23:51 Y.Cloud 阅读(170) 评论(0) 推荐(0) 编辑
摘要：
消息队列提供了一种从一个进程向另一个进程发送一个数据块的方法。 头文件：sys/types.h、sys/ipc.h、sys/msg.h 消息结构定义： struct my_message{ long int message_type; .... } 1.msgget函数 int msgget(key_t key, int msgflag); key：键值。不重复即可，IPC_PR... 阅读全文
posted @ 2010-05-21 21:57 Y.Cloud 阅读(1810) 评论(0) 推荐(1) 编辑
摘要：
本人喜爱玩游戏，读研之前一直玩的是单机游戏，从没玩过角色扮演网络游戏。直到去年9月偶然玩起了DNF这样一款网游，一发不可收拾玩到现在还没收手。说来惭愧，玩了大半年大半部分时间是在玩外挂。 可能是我对外挂比对游戏本身更感兴趣吧。从开始买人家的外挂，到后来完全用上了免费挂，自己也能整出部分功能来。应该说对外挂有了一定的了解。 据我了解，外挂可分为两种类型：一种是内存修改型（如强大的GE)，另一种是... 阅读全文
posted @ 2010-05-11 17:20 Y.Cloud 阅读(365) 评论(0) 推荐(0) 编辑
摘要：
服了博客园了，刚才写了半天的东西，一个连接失败就全没了，博客园的网络咋这么烂呢？ 既然如此，直接进入正题。 首先，网络配置。虚拟机中的网络连接选择Custom，再选VMnet8(NAT)。查看母机网络，配置VMware Network Adapter VMnet8的网络，IP地址使用内网192.168.0.1，网关为母机外网IP，DNS和母机保持一致。子机如果是windows，不用设置就可以上网。... 阅读全文
posted @ 2009-09-22 10:58 Y.Cloud 阅读(257) 评论(0) 推荐(0) 编辑
摘要：
今天在写一个程序时发现一个奇异的现象。 注意其中的float ssavg_ap[4]; float ssdev_ap[4]; 当我把它两放在main函数外面作全局变量时，程序编译没问题，但执行时就出现如下错误：Inset error 1064:You have an error in your SQL syntax; check the manual that corresponds to you... 阅读全文
posted @ 2009-09-18 20:08 Y.Cloud 阅读(224) 评论(0) 推荐(0) 编辑