Peter Jiang - 博客园

CentOS6.4 sudo命令无法使用

摘要：出现问题：[hadoop@namenode bin]$ sudo sudo: effective uid is not 0, is sudo installed setuid root?问题解决：在root权限下执行：chown root /usr/bin/sudochgrp root /usr/bin/sudochmod +s /usr/bin/sudo然后OK! 阅读全文

posted @ 2014-03-17 08:58 Peter Jiang 阅读(764) 评论(0) 推荐(0) 编辑

hadoop1.2.1上安装sqoop1.4.4出现的问题及解决

摘要：问题提示：[hadoop@namenode conf]$ sqoop /home/hadoop/sqoop-1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0/conf/sqoop-env.sh: line 29: export: `/home/hadoop/hbase/hbase-0.94.12': not a valid identifier/home/hadoop/sqoop-1.4.4/sqoop-1.4.4.bin__hadoop-1.0.0/conf/sqoop-env.sh: line 32: export: `/home/hadoop/hive-0. 阅读全文

posted @ 2014-03-10 08:56 Peter Jiang 阅读(1117) 评论(0) 推荐(0) 编辑

VM环境下基于多台CentOS虚拟机的Hadoop分布式集群环境搭建

摘要：作者：jiangchao 完成时间：2013年12月1日版本：v1.0 主机：CentOS 6.4 VM版本:9.0.0 build-812388 ubuntu虚拟机jdk版本：1.6.0_45 ubuntu虚拟机hadoop版本：1.2.1 关键词： VM CentOS hadoop分布式环境一、总体概述本篇主要介绍笔者使用虚拟机vm9.0在CentOS 6.4环境下搭架3台hadoop分布式环境的过程，hadoop版本使用最新的apache官网上稳定的版本1.2.1，笔者一理科男，准备以后把工作学习上的经历通过博客记录下来，文章有不足和欠缺之处，希望各位大神不吝赐... 阅读全文

posted @ 2013-12-14 16:26 Peter Jiang 阅读(582) 评论(0) 推荐(0) 编辑

常用查看Linux系统信息命令（转载）

摘要：常用查看Linux系统信息命令系统# uname -a # 查看内核/操作系统/CPU信息# head -n 1 /etc/issue # 查看操作系统版本# cat /proc/cpuinfo # 查看CPU信息# hostname # 查看计算机名# lspci -tv # 列出所有PCI设备# lsusb -tv # 列出所有USB设备# lsmod # 列出加载的内核模块# env # 查看环境... 阅读全文

posted @ 2013-10-24 15:33 Peter Jiang 阅读(168) 评论(0) 推荐(0) 编辑

与云计算相关的google论文链接以及Hadoop开源网站（转载）

摘要： 1、The Anatomy of a Large-Scale Hypertextual Web Search Enginehttp://infolab.stanford.edu/~backrub/google.htmlhttp://cs.ucsb.edu/~chong/250C/google.pdf2、The Google File Systemhttp://labs.google.com/papers/gfs.htmlhttp://os.inf.tu-dresden.de/Studium/DOS/SS2010/04-GFS-2.pdf3、MapReducehttp://labs.google 阅读全文

posted @ 2013-10-11 10:22 Peter Jiang 阅读(329) 评论(0) 推荐(0) 编辑

结构化数据与非结构化数据的区别（转载）

摘要：在信息社会，信息可以划分为两大类。一类信息能够用数据或统一的结构加以表示，我们称之为结构化数据，如数字、符号；而另一类信息无法用数字或统一的结构表示，如文本、图像、声音、网页等，我们称之为非结构化数据。结构化数据属于非结构化数据，是非结构化数据的特例。定义：　结构化数据：即行数据,存储在数据库里,可以用二维表结构来逻辑表达实现的数据。非结构化数据：包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音频/视频信息等等。半结构化数据：就是介于完全结构化数据（如关系型数据库、面向对象数据库中的数据）和完全无结构的数据（如声音、图像文件等）之间的数据，HTML文档就属于半结.. 阅读全文

posted @ 2013-10-10 11:02 Peter Jiang 阅读(14682) 评论(0) 推荐(0) 编辑

离职了

摘要：今天正式离职了，算是一个转折点，不知道是好是坏，等一年后再看现在吧。以后需要更加专注，努力！！！奋斗！！！阅读全文

posted @ 2013-08-07 23:05 Peter Jiang 阅读(258) 评论(0) 推荐(0) 编辑

邦富软件面试经历

摘要：从7月份打算离职至今，邦富算是第一家面试的公司。这家公司做舆情分析，主要面向政府机构，公司不大，有300人不到。周一早上7点半起来，感觉整个人有点累(昨天晚上还跑去游泳了-_-!)，不过总体精神面貌还不错。在小吃摊上随便买了点吃的，就跑去赶地铁，还好做高铁去广州来的急。下了高铁，又去赶地铁，经过昨晚精密的计算，到达广州南时间10：20。坐了三个地铁终于下来了，继续做公交，半路中司机跑下去买饭，发现我也有点饿了。还好已经离软件园很近了。下了公交，就按照邮件的介绍去找了，虽然路有点曲折，不过还是找到了，对我来说是小case,haha。（小插曲:在路上遇到pconline的保安，居然给公司打起... 阅读全文

posted @ 2013-08-07 22:48 Peter Jiang 阅读(1299) 评论(3) 推荐(0) 编辑

persistence heart