2017 年 6月随笔档案 - yfb

Linux 基本命令

摘要：命令怎么用 shutdown --help shutdown --? man shutdown 这三种方法都可以 shutdown 用错了他会有提示哪一个命令不知道怎么用了，问问男人就可以了 man 就是manual 手册, 指南用手的, 手工的 clear clear是清屏幕，windows是阅读全文

posted @ 2017-06-30 22:12 yfb 阅读(275) 评论(0) 推荐(0) 编辑

Junit 单元测试、BeanUtils、Properties类

摘要：一、 Junit单元测试 1.1. Junit单元测试框架的基本使用一、搭建环境：导入junit.jar包（junit4）二、写测试类： 0，一般一个类对应一个测试类。 1，测试类与被测试类最好是放到同一个包中（可以是不同的源文件夹） 2，测试类的名字为被测试类的名字加Test后缀。三：写测阅读全文

posted @ 2017-06-29 16:42 yfb 阅读(327) 评论(0) 推荐(0) 编辑

Java xml 操作(Dom4J修改xml + xPath技术 + SAX解析 + XML约束)

摘要：1 XML基础 1）XML的作用 1.1 作为软件配置文件 1.2 作为小型的“数据库” 2）XML语法（由w3c组织规定的）标签：标签名不能以数字开头，中间不能有空格，区分大小写。有且仅有一个根标签。属性：可有多个属性，但属性值必须用引号（单引号或双引号）包含，但不能省略，也不能单双混用阅读全文

posted @ 2017-06-24 11:55 yfb 阅读(1522) 评论(0) 推荐(0) 编辑

《将博客搬至CSDN》

摘要：《将博客搬至CSDN》阅读全文

posted @ 2017-06-23 20:30 yfb 阅读(117) 评论(0) 推荐(0) 编辑

HDFS详解

摘要：******HDFS基本概念篇****** 1. HDFS前言 l 设计思想分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； l 在大数据系统中作用：为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务阅读全文

posted @ 2017-06-23 19:07 yfb 阅读(491) 评论(0) 推荐(0) 编辑

操作Hadoop集群

摘要：操作Hadoop集群所有必要的配置完成后，将文件分发到所有机器上的HADOOP_CONF_DIR目录。这应该是所有机器上相同的目录。一般来说，建议HDFS和YARN作为单独的用户运行。在大多数安装中，HDFS进程作为“hdfs”执行。YARN通常使用“纱线”帐户。 Hadoop启动要启动Had 阅读全文

posted @ 2017-06-20 21:11 yfb 阅读(188) 评论(0) 推荐(0) 编辑

JavaScript设计模式（10种）

摘要：设计原则详解设计模式存在根本原因是为了代码复用，增加可维护性。有以下原则： 1.【开闭原则】对扩开发，对修改关闭。 2.【里氏转换原则】子类继承父类。 3.【依赖倒转原则】引用一个对象，如果这个对象有底层类型，直接引用底层。 4.【接口隔离原则】每个接口应该是一个角色一：理解工厂模式工厂模式类阅读全文

posted @ 2017-06-20 00:27 yfb 阅读(296) 评论(0) 推荐(0) 编辑

Git 命令操作

摘要：常用 Git 命令清单我每天使用 Git ，但是很多命令记不住。一般来说，日常使用只要记住下图6个命令，就可以了。但是熟练使用，恐怕要记住60～100个命令。下面是我整理的常用 Git 命令清单。几个专用名词的译名如下。Workspace：工作区Index / Stage：暂存区Reposito 阅读全文

posted @ 2017-06-19 18:50 yfb 阅读(267) 评论(1) 推荐(0) 编辑

vim常用快捷键

摘要：1、vim ~/.vimrc 进入配置文件如果不知道vimrc文件在哪，可使用 :scriptnames 来查看set nu #行号set tabstop=4 #一个tab为4个空格长度set ai? #设置自动缩进syntax on?? #高亮?2、基本空格键向右移动一格x 删除后面的字符 X 阅读全文

posted @ 2017-06-19 18:49 yfb 阅读(144) 评论(0) 推荐(0) 编辑

hadoop 3.0.0 alpha3 安装、配置

摘要：1. 官网下载 wget http://mirror.bit.edu.cn/apache/hadoop/common /hadoop-3.0.0-alpha3/hadoop-3.0.0-alpha3.tar.gz ..注意下载二进制（省时间） 1解压 tar -zxvf hadoop-3.0.0-a 阅读全文

posted @ 2017-06-18 01:43 yfb 阅读(1052) 评论(0) 推荐(0) 编辑

集群使用初步

摘要：5 集群使用初步 5.1 HDFS使用 1、查看集群状态命令： hdfs dfsadmin –report 可以看出，集群共有3个datanode可用也可打开web控制台查看HDFS集群信息，在浏览器打开http://hdp-node-01:50070/ 2、上传文件到HDFS ² 查看HDFS 阅读全文

posted @ 2017-06-17 14:09 yfb 阅读(251) 评论(0) 推荐(0) 编辑

集群搭建

摘要：4. 集群搭建 4.1 HADOOP集群搭建 4.1.1集群简介 HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起 HDFS集群：负责海量数据的存储，集群中的角色主要有 NameNode / DataNode YARN集群：负责海量数据运算时的资阅读全文

posted @ 2017-06-17 14:06 yfb 阅读(300) 评论(0) 推荐(0) 编辑

离线数据分析流程介绍

摘要：3. 离线数据分析流程介绍注：本环节主要感受数据分析系统的宏观概念及处理流程，初步理解hadoop等框架在其中的应用环节，不用过于关注代码细节一个应用广泛的数据分析系统：“web日志数据挖掘” 3.1 需求分析 3.1.1 案例名称 “网站或APP点击流日志数据挖掘系统”。 3.1.2 案例需求阅读全文

posted @ 2017-06-17 14:01 yfb 阅读(2444) 评论(0) 推荐(0) 编辑

分布式系统概述

摘要：2 分布式系统概述注：由于大数据技术领域的各类技术框架基本上都是分布式系统，因此，理解hadoop、storm、spark等技术框架，都需要具备基本的分布式系统概念 2.1 分布式软件系统(Distributed Software Systems) ² 该软件系统会划分成多个子系统或模块，各自运行阅读全文

posted @ 2017-06-17 13:56 yfb 阅读(300) 评论(0) 推荐(0) 编辑

HADOOP背景介绍

摘要：1. HADOOP背景介绍 1.1 什么是HADOOP 1. HADOOP是apache旗下的一套开源软件平台 2. HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理 3. HADOOP的核心组件有 A. HDFS（分布式文件系统） B. YARN（运算资源阅读全文

posted @ 2017-06-17 13:55 yfb 阅读(2805) 评论(0) 推荐(0) 编辑

WebPack 简单使用

摘要：WebPack是什么如今，越来越多的JavaScript代码被使用在页面上，我们添加很多的内容在浏览器里。如何去很好的组织这些代码，成为了一个必须要解决的难题。对于模块的组织，通常有如下几种方法：思考：为什么只有JS需要被模块化管理，前台的很多预编译内容，不需要管理吗？基于以上的思考，Web 阅读全文

posted @ 2017-06-16 00:24 yfb 阅读(190) 评论(0) 推荐(0) 编辑

PHP 设置调试工具XDebug PHPStorm IDE

摘要：先下载PHP扩展Xdebug https://xdebug.org, 可以复制自己的phpinfo粘贴到https://xdebug.org/wizard.php中, 会生成需要下载的版本, php.ini的设置语句. 下载好之后放入php目录的ext文件夹中, 然后设置php.ini, 在最后加上阅读全文

posted @ 2017-06-13 18:47 yfb 阅读(239) 评论(0) 推荐(0) 编辑

Linux下安装MongoDB

摘要：查看MongoDB的最新版官方下载地址： https://www.mongodb.com/download-center?jmp=nav#community 使用wget命令下载安装包 wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_6 阅读全文

posted @ 2017-06-10 20:19 yfb 阅读(187) 评论(0) 推荐(0) 编辑

搜索

常用链接

合集

随笔分类

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论