上一页 1 ··· 4 5 6 7 8 9 下一页
摘要: Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点。当HDFS出现不平衡状况的时候,将引发很多问题,比如MR程序无法很好地利用本地计算的优势,机器之间无法达到更好的网络带宽使用率,机器磁盘无法利用等等。可见,保证HDFS中的数据平衡是非常重要的。 阅读全文
posted @ 2017-05-26 16:45 新际航 阅读(3588) 评论(0) 推荐(0) 编辑
摘要: HBase是一种支持自动负载均衡的分布式KV数据库,在开启balance的开关(balance_switch)后,HBase的HMaster进程会自动根据指定策略挑选出一些Region,并将这些Region分配给负载比较低的RegionServer上。官方目前支持两种挑选Region的策略,一种叫做 阅读全文
posted @ 2017-05-26 16:05 新际航 阅读(5270) 评论(0) 推荐(0) 编辑
摘要: 当在mariadb中插入数据是报 InnoDB is limited to row-logging 异常: java.sql.SQLException: Cannot execute statement: impossible to write to binary log since BINLOG_ 阅读全文
posted @ 2017-03-21 10:44 新际航 阅读(416) 评论(0) 推荐(0) 编辑
摘要: windows下-local模式-运行spark: 1.下载winutils的windows版本 GitHub上,有人提供了winutils的windows的版本,项目地址是:https://github.com/srccodes/hadoop-common-2.2.0-bin,直接下载此项目的zi 阅读全文
posted @ 2017-03-12 15:27 新际航 阅读(395) 评论(0) 推荐(0) 编辑
摘要: 场景:意外操作导致mysql启动异常,数据库损坏,无法使用。 解决: 我们知道MySQL中如果用的是MYISAM数据引擎,那么数据很好恢复,只要将相应.frm, .MYD, .MYI文件拷贝过去即可。但是如果是innodb的话,如果开启innodb_file_per_table=1,则每一个数据表都 阅读全文
posted @ 2017-02-08 12:38 新际航 阅读(400) 评论(0) 推荐(0) 编辑
摘要: python程序退出方式[sys.exit() os._exit() os.kill() os.popen(...)] 知乎说明 http://www.zhihu.com/question/21187839 1. sys.exit() 执行该语句会直接退出程序,这也是经常使用的方法,也不需要考虑平台 阅读全文
posted @ 2017-01-19 14:45 新际航 阅读(85970) 评论(1) 推荐(1) 编辑
摘要: 在使用sun.misc中base64类时,eclipse可能会报找不到Access异常 只需要修改一下访问方式即可,如下: 右键项目-》属性-》Java bulid path-》jre System Library-》access rules-》resolution选择accessible,下面填上 阅读全文
posted @ 2016-12-04 15:12 新际航 阅读(136) 评论(0) 推荐(0) 编辑
摘要: sftp -oPort=60001 root@192.168.0.254-o选项来指定端口号 -oPort=远程端口号 阅读全文
posted @ 2016-11-26 15:53 新际航 阅读(2425) 评论(0) 推荐(0) 编辑
摘要: 在java程序开发中经常用到与服务端的交互工作,主要的就是传递相应的参数请求从而获取到对应的结果加以处理 可以使用Get请求与Post请求,注意!这里的Get请求不是通过浏览器界面而是在程序代码中设置的,达到Get请求的目的,具体请详见下列描述 以下get与post请求需要引入的包: Get请求: 阅读全文
posted @ 2016-11-17 22:40 新际航 阅读(12338) 评论(1) 推荐(0) 编辑
摘要: nginx与apache的不同响应机制——epoll nginx可以处理上百万级别的并发请求就是源至于异步非阻塞的处理机制,异步非阻塞核心即是epoll nginx内部反向代理 阅读全文
posted @ 2016-11-12 16:51 新际航 阅读(474) 评论(0) 推荐(0) 编辑
上一页 1 ··· 4 5 6 7 8 9 下一页