摘要:
1、自定义分区
2、排序
3、combiner 合并
4、数据压缩 阅读全文
摘要:
1、hdfs的副本的配置
2、hadoop启动方式
3、大数据干什么的
4、hdfs-namenode工作机制
hadoop2.8.4
hadoopMapReduce
MapReduce的思想
对wordcount例子程序分析 阅读全文
摘要:
1、HDFS下载文件原理
2、安全模式 safe mode
3、快照:是一种备份,默认:HDFS快照是关闭
4、回收站:默认HDFS的回收站禁用
5、配额:Quota
6、HDFS底层原理-RPC
7、HDFS底层原理-代理对象Proxy
8、RPC与Proxy程序示例 阅读全文
摘要:
1、免密码登录的原理和配置
2、Hadoop安装—全分布模式 (重点)
3、slaves(和自己的从节点机器名字一致)
4、通过HDFS namenode 格式化
5、通过scp拷贝
6、HDFS-NameNode:名称节点
7、HDFS-DataNode:数据节点
8、上传文件
9、HDFS-SecondaryNameNode:第二名称节点
10、HDFS-Web Console
11、HDFS 普通操作命令–hdfs dfs(hadoop fs)
12、HDFS 管理员命令
13、IDEA Maven工程简介
14、文件夹的创建
15、HDFS权限问题
16、IDEA Maven工程实现HDFS的文件上传与下载
17、HDFS上传文件原理 阅读全文
摘要:
1、什么是大数据?
2、数据仓库和大数据
3、OLTP和OLAP
4、Google的基本思想:三篇论文重点
5、Hadoop的简介
6、HDFS的体系架构
7、MR编程模型
8、大数据典型应用场景
9、Hadoop的安装准备工作
10、Hadoop安装—本地安装
11、Hadoop安装—本地安装伪分布模式
12、免密码登录的原理和配置gen -t rsa
13、Hadoop安装—全分布模式 阅读全文
摘要:
1、Linux下命令行中的复制和粘贴
2、打开网卡
3、修改为静态IP
4、IP地址
5、网关
6、子网掩码
7、DNS服务器1、2
8、vi /etc/resolv.conf
9、重启网卡
10、 如何测试可以ping通
11、解压JDK命令
12、系统JDK环境变量的位置
13、写入
14、环境变量生效
15、检验JDK是否生效
16、解压Hadoop
17、解压Hadoop
18、创建日志logs和临时目录tmp
19、vi hadoop-env.sh
20、vi core-site.xml
21、vi hdfs-site.xml
22、修改主机名
23、检查主机名
24、格式化 hdfs
25、启动 hdfs
26、关闭 hdfs
27、查看进程
28、页面
29、临时关闭防火墙
30、永久禁用防火墙
31、查看防火墙状
32、SSH无密码登录
33、关闭selinux防火墙 阅读全文
摘要:
1、MySQL概要
2、MySQL安装
3、Navicat安装与操作MySQL
4、MySQL数据类型
5、MySQL外键、主键、唯一键
6、SQL语句–增删改查 阅读全文
摘要:
1、反射获取Class对象的三种方式
2、反射获得构造方法
3、反射获得成员变量
4、反射获得成员方法
5、泛型
6、泛型方法
7、泛型类
8、泛型擦除
9、类型通配符
10、反射与泛型 阅读全文
摘要:
1、ObjectInputStream
2、POI 实现对word、Excel等文件操作
3、多线程简介
4、线程的使用
5、线程的优先级
6、守护线程
7、窗口卖票小案例
8、线程的同步
9、线程的wait和notify
10、线程池概述
11、线程池使用 阅读全文
摘要:
1、异常概述
2、异常的分类
3、异常->方法抛出异常 throw 关键字
4、异常->异常的处理方式 try…catch…finally
5、自定义异常 阅读全文