天行健 君子以自强不息 地势坤 君子以厚德载物 
酥香妓
过好平凡的一天
摘要: 通过对HDFS的了解,接下来我们接着来学习hadoop第二个核心MapReduce。 一.概述 *MapReduce是一个分布式计算模型,是用户开发“基于hadoop的数据分析应用”的核心框架。将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个hadoop集群上。 阅读全文
posted @ 2021-03-18 08:14 酥香妓 阅读(95) 评论(0) 推荐(1) 编辑
摘要: 上一篇我们熟悉了hadoop,本篇讲解一下hadoop第一个核心HDFS。 一.概述 HDFS是一个分布式文件存储系统,以流式数据访问模式存储超大文件,将数据分块存储到一个商业硬件集群内的不同机器上,通过目录树来定位文件,由多台服务器联合起来实现其功能,集群中的服务器有各自的角色。HDFS的设计适合 阅读全文
posted @ 2020-12-18 19:10 酥香妓 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 本章讲一下关于大数据技术hadoop,直接步入正题,在了解hadoop之前,先来说一下什么是大数据? 一.大数据 1.概述:是指无法在一定时间范围内无法用常规软件工具进行捕捉、管理和处理的数据集合,需要使用新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。主 阅读全文
posted @ 2020-12-17 20:34 酥香妓 阅读(520) 评论(0) 推荐(1) 编辑
摘要: 上篇文章初步认识了一下shell脚本及其简单的案例,下面我们再来讲一下shell的进击部分。 一.变量 1.常用系统变量:($HOME、$SHELL、$PWD、$USER) 2.自定义变量: 2.1.基本语法 *定义变量:变量=值 *撤销变量:unset 变量 *声明静态变量:readonly 变量 阅读全文
posted @ 2020-12-15 13:29 酥香妓 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 一.概述 shell是一个命令行解释器,遵循一定的语法将输入的命令加以解释并传给系统。它接收应用程序和用户命令,然后调用操作系统内核。还是一个功能相当强大的编程语言,易编写、调试,灵活 性强。 二.工作方式 *交互式:用户输入一条指令就立即执行; *批处理式:用户事先编写一个shell脚本,shel 阅读全文
posted @ 2020-12-06 18:01 酥香妓 阅读(137) 评论(0) 推荐(0) 编辑
摘要: 一.初识三层架构: 在讲解springMVC之前,先来了解一下什么是三层架构。我们的开发架构一般都是基于两种形式,一种是C/S架构(客户端/服务器),另一种是B/S架构(浏览器服务器)。在javaEE开发中,几乎都基于B/S架构。在B/S架构中,标准的三层架构分为:表现层、业务层、持久层。 表现层( 阅读全文
posted @ 2020-09-20 10:09 酥香妓 阅读(210) 评论(0) 推荐(0) 编辑
摘要: IOC 一.IOC概述: 一般指控制反转(inversion of Control),把创建对象的权利交给框架,Ioc容器控制对象,是框架的重要特征,并非是面向对象编程的专用术语。它包括依赖注入(DI)和依赖查找。是一种全新的设计模式,可以把它看做是工厂模式的升华,作为一个大工厂,这里面要生成的对象 阅读全文
posted @ 2020-06-13 18:32 酥香妓 阅读(129) 评论(0) 推荐(0) 编辑
摘要: 一.概述(什么是spring): Spring是分层的Java SE/EE应用full-stack(一站式)轻量级开源框架。他解决的是业务逻辑层和其他各层的松耦合问题,将面向接口的编程思想贯穿整个系统应用。以IOC(控制反转)和AOP(面向切面编程)为内核,提供了展现层Spring MVC和持久层S 阅读全文
posted @ 2020-05-24 17:51 酥香妓 阅读(165) 评论(0) 推荐(0) 编辑
摘要: 一.简介 SqlMapConfig.xml是Mybatis的全局配置文件,我们在写mybatis项目时,在SqlMapConfig.xml文件中主要配置了数据库数据源、事务、映射文件等,其实还有很多配置信息,例如: *properties(属性) --property *settings(全局配置参 阅读全文
posted @ 2020-05-20 12:10 酥香妓 阅读(324) 评论(0) 推荐(0) 编辑
摘要: 一.JDBC问题分析: 从之前我们所写到过的jdbc代码或工具类可知: 1).数据库连接创建,释放频繁将造成系统资源浪费从而影响系统性能; 2).SQL语句在代码中硬编码,造成代码不易维护,SQL变动需要改变java代码; 3).执行statement传参时存在硬编码,系统不易维护; 那么是否能减小 阅读全文
posted @ 2020-05-19 14:44 酥香妓 阅读(162) 评论(0) 推荐(0) 编辑