程序优化 - 博客园

摘要： 1.使用lsmod查看ipv6的模块是否被加载。lsmod | grep ipv6[root@dmhadoop011 ~]# lsmod | grep ipv6ipv6 317340 127 bonding如果加载了，则进行如下操作... 阅读全文

posted @ 2015-10-15 16:43 程序优化阅读(647) 评论(0) 推荐(0) 编辑

摘要：问题症状修改 linux 内核文件 #vi /etc/sysctl.conf后执行sysctl -P 报错error: "net.bridge.bridge-nf-call-ip6tables" is an unknown keyerror: "net.bridge... 阅读全文

posted @ 2015-10-15 16:09 程序优化阅读(1405) 评论(1) 推荐(0) 编辑

摘要：对有特殊值的数据倾斜处理SET mapred.reduce.tasks=20;SET hive.map.aggr=TRUE;SET hive.groupby.skewindata=TRUE;SET hive.optimize.skewjoin=TRUE; set ... 阅读全文

posted @ 2015-10-09 14:24 程序优化阅读(927) 评论(0) 推荐(0) 编辑

摘要：使用hive分析日志作业很多的时候，需要修改mysql的默认连接数修改方法打开/etc/my.cnf文件在[mysqld] 中添加 max_connections=1000重启mysql服务 service mysqld restartmysql>show ... 阅读全文

posted @ 2015-09-26 23:01 程序优化阅读(2676) 评论(1) 推荐(0) 编辑

摘要： mysql修改表、字段、库的字符集修改数据库字符集：ALTER DATABASE db_name DEFAULT CHARACTER SET character_name [COLLATE ...];把表默认的字符集和所有字符列（CHAR,VARCHAR,TEXT）改... 阅读全文

posted @ 2015-09-24 01:19 程序优化阅读(194) 评论(0) 推荐(0) 编辑

摘要：如果在INSERT语句末尾指定了ON DUPLICATE KEY UPDATE，并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值，则在出现重复值的行执行UPDATE；如果不会导致唯一值列重复的问题，则插入新行。例如，如果列 a 为... 阅读全文

posted @ 2015-09-23 11:11 程序优化阅读(1279) 评论(0) 推荐(0) 编辑

摘要：频繁的文件访问会导致系统的Cache使用量大增 $ free -m total used free shared buffers cached Mem: 3955 3926 28 0 55 3459 -/+ buffers/cache: 411 3544 ... 阅读全文

posted @ 2015-09-21 16:26 程序优化阅读(223) 评论(0) 推荐(0) 编辑

摘要： Facebook 内部分享：不论你如何富有，你都赚不到更多的时间，你也回不到过去。没有那么多的假如，只有指针滴答的时光飞逝和你应该好好把握的现在，以下25张PPT的分享将为您带来时间价值管理的技巧。1、时间常有，时间优先2、时间总会有的：每天只计划 4～5 小时真正的... 阅读全文

posted @ 2015-09-20 23:03 程序优化阅读(157) 评论(0) 推荐(0) 编辑

摘要：本文总结了java中byte转换int时总是与0xff进行与运算的原因。在剖析该问题前请看如下代码：public static String bytes2HexString(byte[] b) { String ret = ""; for (int i = 0; i ... 阅读全文

posted @ 2015-09-20 01:12 程序优化阅读(223) 评论(0) 推荐(0) 编辑

摘要：阅读全文

posted @ 2015-09-20 00:43 程序优化阅读(137) 评论(0) 推荐(0) 编辑

DolphinScheduler(海豚调度)