01 2017 档案

HBase全分布安装配置

摘要：分布式的hbase依赖于Zookeeper集群所有正常工作节点都必须能够访问zookeeper；用户可以通过启动和关闭脚本就可以把zookeeper当做hbase的一部分来启动和关闭进程；当然，用户也可以不依赖于hbase管理zookeeper集群，只需要为hbase支出需要使用的集群即可#配置zo 阅读全文

posted @ 2017-01-16 17:13 jeffery1010 阅读(713) 评论(0) 推荐(0) 编辑

CentOS Hadoop安装配置详细

摘要：总体思路，准备主从服务器，配置主服务器可以无密码SSH登录从服务器，解压安装JDK，解压安装Hadoop，配置hdfs、mapreduce等主从关系。 1、环境，3台CentOS7，64位，Hadoop2.7.3需要64位Linux，CentOS7 Minimal的ISO文件只有600M，操作系统十阅读全文

posted @ 2017-01-16 16:53 jeffery1010 阅读(746) 评论(0) 推荐(0) 编辑

WCF访问超时：HTTP 请求已超过xx:yy分配的超时。为此操作分配的时间可能是较长超时的一部分。

摘要：在服务端设置时间长些 <client> <endpoint address="http://43.98.49.189:5700/UPJWCFServcie.svc" binding="basicHttpBinding" bindingConfiguration="BasicHttpBinding_I 阅读全文

posted @ 2017-01-13 15:46 jeffery1010 阅读(1194) 评论(0) 推荐(0) 编辑

Apache Spark支持三种分布式部署方式 standalone、spark on mesos和 spark on YARN区别

摘要：链接地址: http://dongxicheng.org/framework-on-yarn/apache-spark-comparing-three-deploying-ways/ Spark On Mesos模式 http://vdisk.weibo.com/s/zm_eIVP-TpyqK 阅读全文

posted @ 2017-01-11 17:42 jeffery1010 阅读(3300) 评论(0) 推荐(0) 编辑

ext3文件系统挂载优化--HBase

摘要：1.设置noatime属性禁止记录文件访问时间戳以减少内核的管理开销 2.优化磁盘每个块为关键系统进程保留的固定空间；这个功能对关键磁盘比较有用，比如操作系统依赖的磁盘，但这个功能对于数据存储来说几乎无用，并且对一个大型集群中的可用存储空间造成极大影响可以将数据存储盘通过命令安全设置为1%，甚阅读全文

posted @ 2017-01-11 15:32 jeffery1010 阅读(251) 评论(0) 推荐(0) 编辑

CentOS安装HBase

摘要：1.下载HBASE http://www.apache.org/dyn/closer.cgi/hbase/ 2.解压文件到安装目录 #mkdir hbase #cd hbase #tar -zxvf ~/Downloads/hbase-1.2.4-bin.tar.gz 3.配置存储数据路径 #完全分阅读全文

posted @ 2017-01-11 10:33 jeffery1010 阅读(339) 评论(0) 推荐(0) 编辑

CentOS安装JDK

摘要：1.下载JDK http://www.oracle.com/technetwork/java/javase/downloads/index.html 2.删除系统现有JDK #rpm -qa | grep java tzdata-java-2014g-1.el6.noarchjava-1.7.0-o 阅读全文

posted @ 2017-01-11 10:09 jeffery1010 阅读(121) 评论(0) 推荐(0) 编辑

CentOS SSH免密登陆

摘要：#环境说明客户机:Mac OS X服务器:CentOS 6.5客户端:OpenSSH,OS X及大多数Linux都内置了OpenSSH.’ssh -v’命令可以查看版本.#大致流程1.在客户机创建一对密钥文件,包括公钥文件(~/.ssh/id_rsa.pub),私钥文件(~/.ssh/id_rsa) 阅读全文

posted @ 2017-01-10 14:19 jeffery1010 阅读(462) 评论(0) 推荐(0) 编辑

centos中文语言安装

摘要：1.查看当前使用的系统语言 #echo LANG 2.查看系统是否安装中文 #locale 如有zh_cn，表示已经安装了中文语言 3.安装中文 #yum groupinstall chinese-support 4.临时更换linux系统的语言环境 #LANG=“中文” 5.修改系统默认语言 #v 阅读全文

posted @ 2017-01-10 13:46 jeffery1010 阅读(424) 评论(0) 推荐(0) 编辑

应用程序安装卸载运行

摘要：*linux下安装软件，如何知道软件安装位置注：一般的软件的默认安装目录在/usr/local或者/opt里，可以到那里去找找.指令名称：whereis功能介绍：在特定目录中查找符合条件的文件。这些文件的烈性应属于原始代码，二进制文件，或是帮助文件。语法格式：whereis [-bfmsu][-B 阅读全文

posted @ 2017-01-10 12:55 jeffery1010 阅读(406) 评论(0) 推荐(0) 编辑

wget

摘要：Linux wget是一个下载文件的工具，它用在命令行下。对于Linux用户是必不可少的工具，尤其对于网络管理员，经常要下载一些软件或从远程服务器恢复备份到本地服务器。如果我们使用虚拟主机，处理这样的事务我们只能先从远程服务器下载到我们电脑磁盘，然后再用ftp工具上传到服务器。这样既浪费时间又浪费阅读全文

posted @ 2017-01-01 11:19 jeffery1010 阅读(418) 评论(0) 推荐(0) 编辑