2019年1月7日

linux中的匿名管道和命名管道

摘要: 一、管道的概念 管道是一种两个进程间进行单向通信的机制。 管道是一种最基本的IPC机制,作用于有血缘关系的进程之间,完成数据传递。调用pipe系统函数即可创建一个管道。管道又分为匿名管道和命名管道。管道有如下特质: (1)其本质是一个伪文件(实为内核缓冲区) (2) 由两个文件描述符引用,一个表示读 阅读全文

posted @ 2019-01-07 15:53 dongtime 阅读(4123) 评论(0) 推荐(0) 编辑

2018年12月26日

linux查看CPU信息

摘要: 几个cpu more /proc/cpuinfo |grep "physical id"|uniq|wc -l 每个cpu是几核(假设cpu配置相同) more /proc/cpuinfo |grep "physical id"|grep "0"|wc -l cat /proc/cpuinfo | 阅读全文

posted @ 2018-12-26 16:46 dongtime 阅读(1220) 评论(0) 推荐(0) 编辑

2018年12月25日

磁盘阵列RAID原理、种类及性能优缺点对比

摘要: 磁盘阵列(Redundant Arrays of Independent Disks,RAID) 1. 存储的数据一定分片; 2. 分基于软件的软RAID(如mdadm)和基于硬件的硬RAID(如RAID卡); 3. RAID卡如同网卡一样有集成板载的也有独立的(PCI-e),一般独立RAID卡性能 阅读全文

posted @ 2018-12-25 16:18 dongtime 阅读(1598) 评论(0) 推荐(0) 编辑

2018年12月19日

SMP和MPP的优缺点

摘要: SMP的全称是"对称多处理"(Symmetrical Multi-Processing)技术,是指在一个计算机上汇集了一组处理器(多CPU),各CPU之间共享内存子系统以及总线结构。它是相对非对称多处理技术而言的、应用十分广泛的并行技术。在这种架构中,一台电脑不再由单个CPU组成,而同时由多个处理器 阅读全文

posted @ 2018-12-19 19:39 dongtime 阅读(2596) 评论(0) 推荐(0) 编辑

2018年12月10日

Hadoop datablock size

摘要: 这是有疑惑的一个问题,因为在董西成的《Hadoop技术内幕——深入解析MapReduce架构设计与实现原理》中提到这个值是64M,而《Hadoop权威指南》中却说是128M,到底哪个是对的呢? 我觉得应该都是对的,可能是版本不同导致的不一致,后面终于在Stack OverFlow找到了答案: 在Ap 阅读全文

posted @ 2018-12-10 16:31 dongtime 阅读(116) 评论(0) 推荐(0) 编辑

2018年11月19日

MySQL 高可用架构之MHA

摘要: 简介: MHA(Master High Availability)目前在MySQL高可用方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook公司)开发,是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中,M 阅读全文

posted @ 2018-11-19 10:24 dongtime 阅读(188) 评论(0) 推荐(0) 编辑

2018年11月16日

MySQL 高可用架构之MMM

摘要: 简介 MMM(Master-Master replication manager for MySQL)是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发,主要用来监控和管理MySQL Master-Master(双主)复制,虽然叫做双主复制,但是业务上同一时刻只允许对一个主进 阅读全文

posted @ 2018-11-16 19:29 dongtime 阅读(479) 评论(0) 推荐(0) 编辑

2018年11月15日

五大常见的MySQL高可用方案

摘要: 本文来自:https://zhuanlan.zhihu.com/p/25960208 UCloud云计算 UCloud云计算 1. 概述 我们在考虑MySQL数据库的高可用的架构时,主要要考虑如下几方面: 如果数据库发生了宕机或者意外中断等故障,能尽快恢复数据库的可用性,尽可能的减少停机时间,保证业 阅读全文

posted @ 2018-11-15 19:06 dongtime 阅读(676) 评论(0) 推荐(0) 编辑

hive加载数据

摘要: 1)加载到普通表 --加载本地文本文件内容(要与hive表字段分隔符顺序都要一致) load data local inpath '/home/hadoop/orders.csv' overwrite into table orders; 1> 如果数据源在HDFS上,则 load data inp 阅读全文

posted @ 2018-11-15 15:36 dongtime 阅读(1459) 评论(0) 推荐(0) 编辑

2018年11月14日

MySQL主从复制和主主复制

摘要: 阅读目录 1、简介 2、环境说明 3、主从复制 3.1、MySQL 3.2、配置文件 3.3、开始构建主从复制 3.4、测试主从复制 4、MySql主主复制 4.1、实现原理 4.2、配置文件 4.3、开始构建主主复制 4.4、测试主主复制 5、注意事项 阅读目录 1、简介 2、环境说明 3、主从复 阅读全文

posted @ 2018-11-14 18:02 dongtime 阅读(1415) 评论(0) 推荐(0) 编辑

导航