出发一路向北

摘要： 1:启动php-fpm/usr/loca/php-fpm/sbin/php-fpm2:配置nginxlocation ~ \.php$ { root /opt/ganglia; fastcgi_pass 127.0.0.1:9000; fastcgi_index index.php; #fastcgi_param SCRIPT_FILENAME /scripts$fastcgi_script_name; #include fastcgi_params; ... 阅读全文

摘要： 1:下载最新版本：http://www.php.org2:解压安装tar -jxvf php-5.3.5.tar.bz2 cd php-5.3.5./configure --prefix=/usr/local/php-fpm --enable-fpm --enable-mbstring=all --enable-sockets --enable-ftp --enable-pcntl --with-mysql=mysqlnd--with-pdo-mysql=mysqlnd --with-mcrypt --with-freetype-dir --with-jpeg-dir --with-png-d 阅读全文

摘要： 最初安装hadoop集群时，使用了root账号，后来发现还是有一些安全隐患的，所以今天就把线上的集群统一配置到了hadoop账号下，具体步骤如下：１：创建hadoop账号useradd hadoop２：ssh无密码登陆su hadoopssh-keygen -t rsacp id_rsa.pub authorized_key(复制到所有datanode，并测试ssh登陆)３：配置hadoop把原先的/usr/local/hadoop复制到/home/hadoop下，并修改配置文件中hadoop_home相关的地址。４：修改文件权限修改dfs.name.dir,dfs.data.dir,mapr 阅读全文

摘要： Mac Port 基本用法总结Mac Port 基本用法总结1. Mac Port的下载地址http://www.macports.org/install.php2. Mac Port的说明文档http://guide.macports.org/3. Mac Port中第三方软件下载包存放的默认路径是：/opt/local/var/macports/distfiles/为了提高安装速度，可以在安装新port时直接将此目录下的文件拷贝到新的Mac Port相同的目录中就可以避免Port去网上下载。4. 使用Mac Port前应该首先更新Port的index引用$sudo port selfupd 阅读全文

摘要： 在非hadoop集群上运行hadoop命令的方法：１：通过java调用hadoop提供的API接口。２：把hadoop的部署到需要调用hadoop命令的机器上。注：第二种方法，需配置正确hadoop-env.sh中的$JAVA_HOME变量和在/etc/hosts中添加namenode的映射即可。 hive，hbase，mahout方法类似；hive和hbase提供了thrift接口。 阅读全文

摘要： mac上安装erlang 14B04的方法:$ git clone https://github.com/erlang/otp.git #下载源码$ cd otp$ ./otp_build autoconf #根据系统进行相应的配置$ CFLAGS=-O0 ./configure --enable-hipe --enable-smp-support --enable-threads \ --enable-kernel-poll --enable-darwin-64bit $ make$ sudo make install 测试通过，现在就开始神奇的erlang之旅吧。 祝你们好运！ 阅读全文

摘要： hive查看当前环境配置命令set -v 可得到所有环境变量。如果没有-v参数，只显示与hadoop不同的配置。hive> set -v;silent=offfs.s3n.impl=org.apache.hadoop.fs.s3native.NativeS3FileSystemdatanucleus.validateColumns=falsemapred.task.cache.levels=2hadoop.tmp.dir=/home/hexianghui/datahadoophadoop.native.lib=truemap.sort.class=org.apache.hadoop.ut 阅读全文

摘要： １：hadoop中备份数设置：(hdfs-site.xml)<property> <name>dfs.replication</name> <value>3</value></property>２：hadoop中备份数修改：hadoop dfs -setrep [-R] <path> 如果有-R将修改子目录文件的性质。hadoop dfs -setrep -w 3 -R /user/hadoop/dir1 就是把目录下所有文件备份系数设置为3.３：hadoop中查看当前某个文件的备份数：hadoop dfs - 阅读全文

摘要： 1,确保创建索引$HADOOP_HOME/bin/hadoopjar$HADOOP_HOME/lib/hadoop-lzo-0.4.10.jar com.hadoop.compression.lzo.DistributedLzoIndexer /user/hive/warehouse/flog2 如果在hive中新建外部表的语句为CREATE EXTERNAL TABLE foo ( columnA string, columnB string ) PARTITIONED BY (date string) ROW FORMAT DELIMITED F... 阅读全文

摘要： 使用yum，如何安装iostatsysstat 使用yum安装#yum install sysstatsysstat的安装包是：sysstat-5.0.5-1.i386.rpm，装完了sysstat-5.0.5-1.i386.rpm后 就会有iostat、mpstat、sar、sa的功能，sysstat-5.0.5-1.i386.rpm启动sysstat/etc/init.d/sysstat start设置sysstat自启动#checkfig sysstat onMPSTATMPSTAT -P ALL 2 3mpstat 是Multiprocessor Statistics的缩写，是实时系统 阅读全文