随笔档案「2015年11月」 - 程序优化

HDFS集中化缓存管理

摘要：概述HDFS中的集中化缓存管理是一个明确的缓存机制，它允许用户指定要缓存的HDFS路径。NameNode会和保存着所需快数据的所有DataNode通信，并指导他们把块数据缓存在off-heap缓存中。HDFS集中化缓存管理具有许多重大优势：1.明确的锁定可以阻止频繁使... 阅读全文

posted @ 2015-11-25 12:13 程序优化阅读(325) 评论(0) 推荐(0)

摘要：异常堆栈如下：2015-11-24 16:49:11,495 ERROR org.apache.hive.service.cli.operation.Operation: Error running hive query:org.apache.hive.service... 阅读全文

posted @ 2015-11-24 19:06 程序优化阅读(1023) 评论(0) 推荐(0)

摘要：一、引言最近在整理理大数据模式下的数据仓库数据模型，资料来自互联网和读过的数据仓库理论和实践相关。二、3NF（1）1NF-无重复的列数据库表的每一列都是不可分割的基本数据项，同一列中不能有多个值，即实体中的某个属性不能有多个值或者不能有重复的属性。如果出现... 阅读全文

posted @ 2015-11-23 17:49 程序优化阅读(494) 评论(0) 推荐(0)

TCP之close_wait

摘要：TCP之close_wait浏览:3697次出处信息/* * @author: ahuaxuan * @date: 2010-4-30 */ 查看各状态连接数：netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S)... 阅读全文

posted @ 2015-11-23 00:16 程序优化阅读(630) 评论(0) 推荐(0)

摘要：authentification验证 - 是指验证who you are(你是谁), 所以需要用到username和password进行身份验证。authorization授权 - 是指what can you do(你可以做什么), 而且这个发生在验证通过后。比如对... 阅读全文

posted @ 2015-11-23 00:02 程序优化阅读(195) 评论(0) 推荐(0)

摘要：Before performing any upgrades or uninstalling software, stop all of the Hadoop services in the following order:RangerKnoxOozieWebHCat... 阅读全文

posted @ 2015-11-20 17:56 程序优化阅读(389) 评论(0) 推荐(0)

CentOS 6.4安装配置ldap

摘要：CentOS 6.5安装配置ldap时间:2015-07-14 00:54来源:blog.51cto.com 作者:“ly36843运维” 博客举报点击:274次一.安装ldap[root@dev ~]# yum install openldap openldap... 阅读全文

posted @ 2015-11-19 01:10 程序优化阅读(342) 评论(0) 推荐(0)

摘要：Changing Hive Dynamic Partition LimitsSymptoms:Hive enforces limits on the number of dynamic partitions that it creates. The default ... 阅读全文

posted @ 2015-11-17 10:51 程序优化阅读(3576) 评论(0) 推荐(0)

数据库事务隔离级别

摘要：一,事务的4个基本特征 Atomic（原子性）：事务中包含的操作被看做一个逻辑单元，这个逻辑单元中的操作要么全部成功，要么全部失败。 Consistency（一致性）：只有合法的数据可以被写入数据库，否则事务应该将其回滚到最初状态。 Isolation（隔离性... 阅读全文

posted @ 2015-11-14 10:54 程序优化阅读(207) 评论(0) 推荐(0)

摘要：如何获取设备特征码、版本号、激活码？方式一第一步：打开凯立德移动导航系统，进入地图界面，点击“查找”第二步：在查找页面以“快拼”的输入方式下，输入“AAAAAA”（6个A）阅读全文

posted @ 2015-11-14 00:58 程序优化阅读(2511) 评论(0) 推荐(0)

摘要：【CRM五策略】 ❶对客户进行分类，不是根据规模，而是根据和你的关系，越细腻越好； ❷不定期更新客户资料，信息越全面越好； ❸主动对客户进行关怀，拿出你的诚意和关爱； ❹定期与客户面对面沟通，这是... 阅读全文

posted @ 2015-11-10 17:03 程序优化阅读(2259) 评论(0) 推荐(0)

摘要：生产服务器环境最小化安装后 Centos 6.5优化配置备忘本文 centos 6.5 优化的项有18处,列表如下:1、centos6.5最小化安装后启动网卡2、ifconfig查询IP进行SSH链接3、更新系统源并且升级系统4、系统时间更新和设定定时任5、修改ip... 阅读全文

posted @ 2015-11-06 11:05 程序优化阅读(182) 评论(0) 推荐(0)

摘要：import java.util.LinkedHashMap;import java.util.Map; /** * LRU (Least Recently Used) */public class LRUCache extends LinkedHashMap { ... 阅读全文

posted @ 2015-11-02 23:12 程序优化阅读(1761) 评论(0) 推荐(0)

摘要：kafka.common.ConsumerRebalanceFailedException: group_dd-1446432618163-2746a209 can't rebalance after 10 retries at kafka.consumer.Zoo... 阅读全文

posted @ 2015-11-02 08:47 程序优化阅读(1729) 评论(0) 推荐(0)

DolphinScheduler(海豚调度)