摘要: 数据操作语言: 插入:insert 修改:update 删除:delete 阅读全文
posted @ 2019-08-15 20:16 DiYong 阅读(1716) 评论(0) 推荐(0) 编辑
摘要: union 联合 合并:将多条查询语句的结果合并成一个结果 语法: 查询语句1 union 查询语句2 union ... 应用场景: 要查询的结果来自于多个表,且多个表没有直接的连接关系,但查询的信息一致时 特点:★ 1、要求多条查询语句的查询列数是一致的! 2、要求多条查询语句的查询的每一列的类型和顺序最好一致 3、union关键字默认去重,如果使用union all 可以包含重复项 阅读全文
posted @ 2019-08-15 20:02 DiYong 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 应用场景:当要显示的数据,一页显示不全,需要分页提交sql请求 语法: select 查询列表 from 表 【join type join 表2 on 连接条件 where 筛选条件 group by 分组字段 having 分组后的筛选 order by 排序的字段】 limit 【offset,】size; offset要显示条目的起始索引(起始索引从0开始) size 要显示的条目个数 特点: ①limit语句放在查询语句的最后 ②公式 要显示的页数 page,每页的条目数size select 查询列表 from 表 limit (page-1)*size,size; 阅读全文
posted @ 2019-08-15 19:35 DiYong 阅读(168) 评论(0) 推荐(0) 编辑
摘要: 含义: 出现在其他语句中的select语句,称为子查询或内查询 外部的查询语句,称为主查询或外查询 分类: 按子查询出现的位置: select后面: 仅仅支持标量子查询 from后面: 支持表子查询 where或having后面:★ 标量子查询(单行) √ 列子查询 (多行) √ 行子查询 exists后面(相关子查询) 表子查询 按结果集的行列数不同: 标量子查询(结果集只有一行一列) 列子查询(结果集只有一列多行) 行子查询(结果集有一行多列) 表子查询(结果集一般为多行多列) 阅读全文
posted @ 2019-08-15 19:04 DiYong 阅读(242) 评论(0) 推荐(0) 编辑
摘要: 语法: select 查询列表 from 表1 别名 【连接类型】 join 表2 别名 on 连接条件 【where 筛选条件】 【group by 分组】 【having 筛选条件】 【order by 排序列表】 分类: 内连接(★):inner 外连接 左外(★):left 【outer】 右外(★):right 【outer】 全外:full【outer】 交叉连接:cross 阅读全文
posted @ 2019-08-15 16:47 DiYong 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 含义:又称多表查询,当查询的字段来自于多个表时,就会用到连接查询 笛卡尔乘积现象:表1 有m行,表2有n行,结果=m*n行 发生原因:没有有效的连接条件 如何避免:添加有效的连接条件 分类: 按年代分类: sql92标准:仅仅支持内连接 sql99标准【推荐】:支持内连接+外连接(左外和右外)+交叉连接 按功能分类: 内连接: 等值连接 非等值连接 自连接 外连接: 左外连接 右外连接 全外连接 交叉连接 阅读全文
posted @ 2019-08-15 15:16 DiYong 阅读(438) 评论(0) 推荐(0) 编辑
摘要: 1 DataNode工作机制 2 数据完整性 3 掉线时限参数设置 4 服役新数据节点 5 退役旧数据节点 6 Datanode多目录配置 阅读全文
posted @ 2019-08-15 03:37 DiYong 阅读(452) 评论(0) 推荐(0) 编辑
摘要: 1 NN和2NN工作机制 2 Fsimage和Edits解析 3 CheckPoint时间设置 4 NameNode故障处理 5 集群安全模式 6 NameNode多目录配置 阅读全文
posted @ 2019-08-15 03:31 DiYong 阅读(488) 评论(0) 推荐(0) 编辑
摘要: 1 HDFS写数据流程 1.1 剖析文件写入 HDFS写数据流程,如图所示 1)客户端通过Distributed FileSystem模块向NameNode请求上传文件,NameNode检查目标文件是否已存在,父目录是否存在。 2)NameNode返回是否可以上传。 3)客户端请求第一个 Block 阅读全文
posted @ 2019-08-15 03:24 DiYong 阅读(623) 评论(2) 推荐(0) 编辑
摘要: 2 HDFS的API操作 2.1 HDFS文件上传(测试参数优先级) 1.编写源代码 2.将hdfs-site.xml拷贝到项目的根目录下 3.参数优先级 参数优先级排序:(1)客户端代码中设置的值 >(2)ClassPath下的用户自定义配置文件 >(3)然后是服务器的默认配置 2.2 HDFS文 阅读全文
posted @ 2019-08-15 03:16 DiYong 阅读(288) 评论(0) 推荐(0) 编辑
摘要: HDFS客户端操作 1.HDFS客户端环境准备 1.根据自己电脑的操作系统拷贝对应的编译后的hadoop jar包到非中文路径(例如:D:\Develop\hadoop-2.7.2),如图所示。 图 编译后的hadoop jar包 2.配置HADOOP_HOME环境变量,如图所示。 图 配置HADO 阅读全文
posted @ 2019-08-15 02:54 DiYong 阅读(370) 评论(0) 推荐(0) 编辑
摘要: 大数据技术之Hadoop(HDFS) 第一章 HDFS概述 HDFS组成架构 HDFS文件块大小 第二章 HDFS的Shell操作(开发重点) 1.基本语法 bin/hadoop fs 具体命令 OR bin/hdfs dfs 具体命令 dfs是fs的实现类。 2.命令大全 3.常用命令实操 (0) 阅读全文
posted @ 2019-08-15 02:41 DiYong 阅读(336) 评论(0) 推荐(0) 编辑