jsqup

2022年3月4日

摘要： 1. 写数据读数据写数据流程读数据流程 2. 为什么HDFS不支持存储小文件？原因占用NameNode大量的内存和磁盘来存储文件目录和块信息读取小文件的寻址时间大于读取小文件内容的时间解决方案从根源上解决小文件的产生，如从每小时抽取一次修改为每天抽取一次来积累数据量合并。写一个MR任阅读全文

posted @ 2022-03-04 19:47 jsqup 阅读(46) 评论(0) 推荐(0) 编辑

分布式与集群的区别

摘要：解释单机结构理解一个系统业务量很小的时候所有的代码都放在一个项目中就好了，然后这个项目部署在一台服务器上就好了。整个项目所有的服务都由这台服务器提供。这就是单机结构缺点单机的处理能力是有限的，当你的业务增长到一定程度的时候，单机的硬件资源将无法满足你的业务需求，此时便出现了集群模式。集群阅读全文

posted @ 2022-03-04 15:08 jsqup 阅读(36) 评论(0) 推荐(0) 编辑

2022年3月2日

日期函数

摘要：返回日期加具体时间 select now(); 返回日期 select curdate(); 返回具体时间 select curtime() 返回具体的部分年月日小时分钟秒分 select year(now()) select month(now()) select day(now() 阅读全文

posted @ 2022-03-02 12:39 jsqup 阅读(74) 评论(0) 推荐(0) 编辑

2022年3月1日

linux中关于文件的操作命令

摘要： 1. 查看文件内容cat tac more less head tail 正序查看文件内容cat 规则：参数-A查看所有内容， $代表每行的内容，参数-n显示行号例子： cat -An /etc/passwd 倒序查看文件内容tac 一屏一屏查看文件内容more(左下角会显示查看文件的进度) 阅读全文

posted @ 2022-03-01 22:09 jsqup 阅读(79) 评论(0) 推荐(0) 编辑

Hadoop集群搭建之完全分布式搭建

摘要： 1. Hadoop集群搭建的三种模式本地运行模式无需运行任何守护进行，所有程序都在单个JVM上执行伪分布式运行模式 Hadoop对应的Java进程都运行在一个物理机器上完全分布式运行模式 Hadoop对应的Java进程都运行在多台物理机器上 2. 具体步骤及解释 1. 准备安装环境 # 将h 阅读全文

posted @ 2022-03-01 21:04 jsqup 阅读(46) 评论(0) 推荐(0) 编辑

scp命令及ssh常用

摘要： scp命令 1. 命令格式 scp [参数] [原路径] [目标路径] 2. 命令功能 scp可以在linux服务器之间复制文件和目录 3. 命令参数 -r 递归赋值整个目录 -q 不显示传输进度条 4. 使用实例复制文件命令格式eg: scp /etc/profile node001:/etc 阅读全文

posted @ 2022-03-01 19:00 jsqup 阅读(42) 评论(0) 推荐(0) 编辑

排名次(两个表交错连接)

摘要：示例输入: Scores 表: + + + | id | score | + + + | 1 | 3.50 | | 2 | 3.65 | | 3 | 4.00 | | 4 | 3.85 | | 5 | 4.00 | | 6 | 3.65 | + + + 输出: + + + | score | ra 阅读全文

posted @ 2022-03-01 11:12 jsqup 阅读(23) 评论(0) 推荐(0) 编辑

第二高的薪水

摘要： 1. 介绍将题中所需的知识点提取出来，达到巩固的效果。 2. 起别名方式一：使用as SELECT 100%98 AS 结果; 方式二：使用空格 SELECT last_name 姓,first_name 名 FROM 库名; 注意：如果别名内含有关键字,建议用双引号引起来,单引号也可以，但是阅读全文

posted @ 2022-03-01 10:22 jsqup 阅读(21) 评论(0) 推荐(0) 编辑

2022年2月28日

连接查询

摘要： 1. 连接查询介绍含义：又称多表查询，当查询的字段来自多个表时，就会用到连接查询。笛卡尔乘积现象：表1有m行，表2有n行，结果m*n行发生原因：没有有效的连接条件如何避免：添加有效的连接条件 SELECT NAME,boyName FROM boys,beauty WHERE bo 阅读全文

posted @ 2022-02-28 21:23 jsqup 阅读(162) 评论(0) 推荐(0) 编辑

java基础

摘要： java的核心优势跨平台/可移植性安全性面向对象简单性高性能分布式多线程健壮性，不会造成计算机系统崩溃 JVM应用程序的运行机制 JVM JRE JDK 的区别 JVM是一个虚拟的用于执行bytecode字节码的“虚拟计算机” java写完之后，编译成字节码，再把字节码喂给JVM，J 阅读全文

posted @ 2022-02-28 14:41 jsqup 阅读(32) 评论(0) 推荐(0) 编辑

公告