Hadoop develop

博学笃志,切问近思,此八字,是收放心的工夫。 神闲气静,智深勇沉,此八字,是干大事的本领。

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

09 2013 档案

摘要:前言: 参加Unix/Linux相关高级研发职位时,是否经常会被文档,单机允许最大进程数、线程数和Socket连接数,而你却感到束手无措呢?本文给你一个最为详细的答案。一、最大进程数 运行Linux ulimit -a指令,我们可以看到:max user processes =1024 运行结构如下图所示:[root@localhost ~]# ulimitunlimited[root@localhost ~]# ulimit -acore file size (blocks, -c) 0data seg size (kbytes, -d) unlim... 阅读全文
posted @ 2013-09-24 10:39 张子良 阅读(1259) 评论(0) 推荐(0) 编辑

摘要:Erlang千万级用户游戏框架(Openpoker)源码文件分析清单,openpoker源码 erlang写的网游服务器源码,OpenPoker是一个大型多人扑克网游,内建支持了容错能力,负载平衡和无限制的规模大小。 阅读全文
posted @ 2013-09-18 15:15 张子良 阅读(4192) 评论(0) 推荐(1) 编辑

摘要:前言:刚刚完成的HDFS高级开发培训课程课件中的一个章节,不知道PPT,如何导出HTML格式,只好批量导出图片,贴图了。连接管理:建立连接、断开连接、设置连接参数 文件操作:浏览文件、上传文件、下载文件、删除文件、导入文件(批量)、刷新列表用户管理:查看用户信息、修改用户密码 阅读全文
posted @ 2013-09-12 14:07 张子良 阅读(409) 评论(0) 推荐(0) 编辑

摘要:一、问题描述 因为之前(2012)对HDFS客户端Thrift接口的库文件封装使用的是VS2010,最近考虑做一个完整的网盘系统的客户端,就把该库文件使用起来,比较悲剧的是之前做过操作系统的还原。我的VS2010已经没有了,过程中为了与客户的Project版本保持一致,我的MSProject也做了部分升级,word\Excel仍然是Office2007,而MSproject版本为offcie2010。重装VS2010的时候,悲剧发生了,每次安装到中间,总是报错误信息,继而安装失败,错误信息描述如下:error 25541 failed to open xml file c:\windows\. 阅读全文
posted @ 2013-09-05 11:25 张子良 阅读(1089) 评论(0) 推荐(0) 编辑

摘要:64岁祖母级选手53小时横渡海峡创纪录,上岸后,尼亚德用仅存的力气对围观者说:“我只想说三句话,第一,我们永远也不要放弃。第二,在追逐梦想的道路上,你永远也不会老。第三,这(横渡海峡)看起来是一个人的运动,但实际上是团队努力的结果。 阅读全文
posted @ 2013-09-05 08:10 张子良 阅读(797) 评论(0) 推荐(1) 编辑

摘要:fork()函数执行一次,返回两次,你知道原因吗?子进程中返回0;父进程中返回子进程ID(>0);调用一次返回两次;复制父进程地址空间内容(非地址)给子进程;子进程拥有独立的地址空间;无法确定执行顺序; 阅读全文
posted @ 2013-09-03 14:45 张子良 阅读(825) 评论(0) 推荐(3) 编辑

摘要:前言: 本文是《基于Hadoop开发网络云盘系统架构设计方案》的第二篇,针对界面原型原本考虑有两个方案:1、类windows模式,文件夹、文件方式,操作习惯完全按照Windows方式进行,提供右键菜单管理命令。2.浏览列表式,提供常规界面按钮式命令。本文采用的方式是文件清单列表式,至于第一种方式,另列专题进行说明。一、界面原型二、设计说明 连接管理:建立连接、断开连接、设置连接参数 文件操作:浏览文件、上传文件、下载文件、删除文件、导入文件(批量)、刷新列表 用户管理:查看用户信息、修改用户密码 三、遗留问题 1.文件操作长连接还是短连接问题? 2.下载优化问题?以文件/块为单位... 阅读全文
posted @ 2013-09-03 08:16 张子良 阅读(2100) 评论(0) 推荐(0) 编辑

摘要:引言:二代支付系统是人民银行新一代现代化支付系统,目前各商业银行的接入开发工作正紧锣密鼓的进行。按照人民银行的计划和安排,2013年10份,第一批接入工作将开始。本文是第二代支付系统城市商业银行接入系统的总体设计初稿。一、总体设计 详见下图:二、外部结构 城市商业银行以参与者身份接入人民银行第二代支付系统,在整个第二代支付系统中,商业银行的角色见上图。三、设计说明 3.1 系统构成 整个行内接入系统划分为:前端系统(VFS)、前置系统(FRT)、核心系统(CoreBank)、报表系统(Report)、运行监控系统(Monitor)。 3.2 组件说明 BEP:一代支付小额业务服务组... 阅读全文
posted @ 2013-09-02 10:46 张子良 阅读(3979) 评论(0) 推荐(2) 编辑