陋室铭
永远也不要停下学习的脚步(大道至简至易)

posts - 2167,comments - 570,views - 413万

随笔分类 -  hadoop

不懂 ZooKeeper?没关系,这一篇给你讲的明明白白
摘要:本来想系统回顾下 ZooKeeper的,可是网上没找到一篇合自己胃口的文章,写的差不多的,感觉大部分都是基于《从Paxos到ZooKeeper 分布式一致性原理与实践》写的,所以自己读了一遍,加上项目中的使用,做个整理。加油,奥利给! 前言 面试常常被要求「熟悉分布式技术」,当年搞 “XXX管理系统 阅读全文
posted @ 2020-09-15 16:41 宏宇 阅读(283) 评论(0) 推荐(0) 编辑
Hadoop
摘要:总的来说, 如果有一个很大的任务, 单机很难完成, 所以要用到分布式, 就是有一台master机子(服务器), 有很多slave机子(服务器), 然后master给slaves分配任务, 把一个大任务分成很多小任务, 给每个slave去完成, 然后master机子收集每个slave的结果, 处理得出 阅读全文
posted @ 2020-08-04 16:58 宏宇 阅读(653) 评论(0) 推荐(0) 编辑
ZooKeeper安装及配置(Windows系统下)
摘要:ZooKeeper的定义用一句话就能说清:分布式服务框架 Zookeeper -- 管理分布式环境中的数据。下面从安装开始,对这个框架进行分析。 1.安装 1. 官网下载压缩包并解压到D:\Program Files (x86)\zookeeper-3.4.12 2. 在D:\Program Fil 阅读全文
posted @ 2020-03-20 15:58 宏宇 阅读(305) 评论(0) 推荐(0) 编辑
Zookeeper 在Windows下的安装过程及测试
摘要:安装jdk 安装Zookeeper. 在官网http://zookeeper.apache.org/下载zookeeper.我下载的是zookeeper-3.4.6版本。 解压zookeeper-3.4.6至D:\machine\zookeeper-3.4.6. 在D:\machine 新建data 阅读全文
posted @ 2020-03-20 15:56 宏宇 阅读(156) 评论(0) 推荐(0) 编辑
Windows安装和使用zookeeper(ZooKeeperNet)
摘要:之前整理过一篇文章《zookeeper 分布式锁服务》,本文介绍的 Zookeeper 是以 3.4.5 这个稳定版本为基础,最新的版本可以通过官网 http://hadoop.apache.org/zookeeper/来获取,Zookeeper 的安装非常简单,下面将从单机模式和集群模式两个方面介 阅读全文
posted @ 2020-03-20 15:51 宏宇 阅读(431) 评论(0) 推荐(0) 编辑
分布式服务框架 Zookeeper—管理分布式环境中的数据
摘要:Zookeeper 安装和配置详解 本文介绍的 Zookeeper 是以 3.2.2 这个稳定版本为基础,最新的版本可以通过官网 http://hadoop.apache.org/zookeeper/来获取,Zookeeper 的安装非常简单,下面将从单机模式和集群模式两个方面介绍 Zookeepe 阅读全文
posted @ 2020-03-20 15:47 宏宇 阅读(148) 评论(0) 推荐(0) 编辑
安装、启动、配置zookeeper(window版)
摘要:安装zookeeper (1)解压安装包 (2)修改zoo_sample.cfg文件名为:zoo.cfg (3)在加压文件下建立data文件夹 (4)修改zoo.cfg (5)启动 打开cmd指定目录与cmd启动。 也可以直接把zkServer.cmd与zkCli.cmd拖拽到cmd中执行。 注意如 阅读全文
posted @ 2020-03-20 13:29 宏宇 阅读(539) 评论(0) 推荐(0) 编辑
Hadoop window win10 基础环境搭建(2.8.1)(转)
摘要:下面运行步骤除了配置文件有部分改动,其他都是参照hadoop下载解压的share/doc/index.html。 hadoop下载:http://apache.opencas.org/hadoop/common/ 解压至无空格目录下即可,下面是目录结构: 下面配置windows环境: Java JD 阅读全文
posted @ 2019-09-26 16:51 宏宇 阅读(573) 评论(0) 推荐(0) 编辑
Hadoop入门——初识Hadoop
摘要:一.hadoop是什么 Hadoop被公认是一套行业大数据标准开源软件,在分布式环境下提供了海量数据的处理能力。几乎所有主流厂商都围绕Hadoop开发工具、开源软件、商业化工具和技术服务。今年大型IT公司,如EMC、Microsoft、Intel、Teradata、Cisco都明显增加了Hadoop 阅读全文
posted @ 2019-09-26 16:47 宏宇 阅读(193) 评论(0) 推荐(0) 编辑

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

点击右上角即可分享
微信分享提示