Hadoop develop

博学笃志,切问近思,此八字,是收放心的工夫。 神闲气静,智深勇沉,此八字,是干大事的本领。

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2013年10月12日

摘要: 一、软考的英文名称经中国外文局审定官方版本,软考英文名称计算机技术与软件专业技术资格(水平)考试的英文名称为:QualificationCertificateofComputerandSoftwareTechnologyProficiency二、各级别证书推荐英文名称信息系统项目管理师:InformationSystemProjectManager系统分析师:SystemAnalyst系统架构设计师:SystemArchitect软件设计师:SoftwareDesignEngineer软件评测师:SoftwareTestingEngineer程序员:Programmer网络工程师:Networ 阅读全文
posted @ 2013-10-12 08:46 张子良 阅读(4247) 评论(0) 推荐(1) 编辑

摘要: 了解Linux环境下,进程的地址空间划分,对于我们理解Linux应用程序有很大的帮助,否则会被New与Malloc之类的指针操作弄的晕头转向,本文基于Linux内核讲述了Linux/Unix线性地址空间的划分,为你答疑解惑。全局变量在哪里?静态变量在哪里?局部变量在哪里?你清楚吗? 阅读全文
posted @ 2013-10-12 07:11 张子良 阅读(693) 评论(0) 推荐(0) 编辑

2013年10月10日

摘要: 上篇文章提起关于HBase插入性能优化设计到的五个参数,从参数配置的角度给大家提供了一个性能测试环境的实验代码。根据网友的反馈,基于单线程的模式实现的数据插入毕竟有限。通过个人实测,在我的虚拟机环境下,单线程插入数据的值约为4w/s。集群指标是:CPU双核1.83,虚拟机512M内存,集群部署单点模式。本文给出了基于多线程并发模式的,测试代码案例和实测结果,希望能给大家一些启示: 阅读全文
posted @ 2013-10-10 23:01 张子良 阅读(3746) 评论(1) 推荐(1) 编辑

2013年10月9日

摘要: 大家在使用HBase的过程中,总是面临性能优化的问题,本文从HBase客户端参数设置的角度,研究HBase客户端数据批量插入性能优化的问题。事实胜于雄辩,数据比理论更有说服力,基于此,作者设计了这么一个HBase数据插入性能优化实测实验,希望大家用自己的服务器跑出的结果,给自己一个值得信服的结论。 阅读全文
posted @ 2013-10-09 09:22 张子良 阅读(4021) 评论(0) 推荐(0) 编辑

2013年10月8日

摘要: HBase shell使用过程中,使用CRT客户端,命令输入后无法删除一直困绕着我,今天终于受不了,几番度娘,谷哥之后,终于有了解决方法,特共享给大家。 阅读全文
posted @ 2013-10-08 17:06 张子良 阅读(1115) 评论(0) 推荐(0) 编辑

2013年10月7日

摘要: 互联网的发展和电子商务平台的崛起,催生了大数据时代的来临,作为大数据典型开发框架的MongoDB成为了No-sql数据库的典型代表。MongoDB从入门到精通你不得不知的21个为什么专为大数据时代,大数据应用系统系统分析、架构设计和平台开发人员而准备。希望能够为大家起到提纲挈领,指明大家学习目标和方向的作用。 阅读全文
posted @ 2013-10-07 19:04 张子良 阅读(2218) 评论(0) 推荐(0) 编辑

2013年9月24日

摘要: 前言: 参加Unix/Linux相关高级研发职位时,是否经常会被文档,单机允许最大进程数、线程数和Socket连接数,而你却感到束手无措呢?本文给你一个最为详细的答案。一、最大进程数 运行Linux ulimit -a指令,我们可以看到:max user processes =1024 运行结构如下图所示:[root@localhost ~]# ulimitunlimited[root@localhost ~]# ulimit -acore file size (blocks, -c) 0data seg size (kbytes, -d) unlim... 阅读全文
posted @ 2013-09-24 10:39 张子良 阅读(1259) 评论(0) 推荐(0) 编辑

2013年9月18日

摘要: Erlang千万级用户游戏框架(Openpoker)源码文件分析清单,openpoker源码 erlang写的网游服务器源码,OpenPoker是一个大型多人扑克网游,内建支持了容错能力,负载平衡和无限制的规模大小。 阅读全文
posted @ 2013-09-18 15:15 张子良 阅读(4188) 评论(0) 推荐(1) 编辑

2013年9月12日

摘要: 前言:刚刚完成的HDFS高级开发培训课程课件中的一个章节,不知道PPT,如何导出HTML格式,只好批量导出图片,贴图了。连接管理:建立连接、断开连接、设置连接参数 文件操作:浏览文件、上传文件、下载文件、删除文件、导入文件(批量)、刷新列表用户管理:查看用户信息、修改用户密码 阅读全文
posted @ 2013-09-12 14:07 张子良 阅读(409) 评论(0) 推荐(0) 编辑

2013年9月5日

摘要: 一、问题描述 因为之前(2012)对HDFS客户端Thrift接口的库文件封装使用的是VS2010,最近考虑做一个完整的网盘系统的客户端,就把该库文件使用起来,比较悲剧的是之前做过操作系统的还原。我的VS2010已经没有了,过程中为了与客户的Project版本保持一致,我的MSProject也做了部分升级,word\Excel仍然是Office2007,而MSproject版本为offcie2010。重装VS2010的时候,悲剧发生了,每次安装到中间,总是报错误信息,继而安装失败,错误信息描述如下:error 25541 failed to open xml file c:\windows\. 阅读全文
posted @ 2013-09-05 11:25 张子良 阅读(1088) 评论(0) 推荐(0) 编辑