摘要: 上面我们介绍了 Hadoop 本地运行模式的搭建,但是实际生产环境均是采用完全分布式模式的,下面我们采用三个节点来搭建完全分布式的 Hadoop 的环境。 一、准备工作: 准备3台客户机(关闭防火墙、静态ip、主机名称) 安装JDK 配置环境变量 安装Hadoop 配置环境变量 配置集群 单点启动 阅读全文
posted @ 2020-10-09 23:20 晓枫的春天 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 上篇文章对Hadoop 作了简单介绍,下面我们来试着在 虚拟机上安装 Hadoop; 一、虚拟机准备 生产环境 Hadoop 集群在 N 个节点上工作,但是今天学习阶段我准备了 1 台虚拟机进行模拟学习本地模式; 我使用的是:VMware Workstation Pro 软件,将事先准备好的虚拟机克 阅读全文
posted @ 2020-10-09 22:49 晓枫的春天 阅读(278) 评论(0) 推荐(0) 编辑
摘要: 一、什么是大数据? 大数据(Big Data) :在一定时间范围内无法通过常规软件进行捕捉,处理和管理的一系列数据集合,大数据主要解决的是海量数据的存储和分析计算问题。 二、大数据特点 大量 多样 高速 低价值密度 三、Hadoop 是什么? 1、Hadoop 狭义上就是 Apache Hadoop 阅读全文
posted @ 2020-10-09 21:26 晓枫的春天 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 接下来我们来学习 python 中的列表(有点像 Java 中的数组,但并不是数组) “列表”是一个值,它包括多个字构成的序列,术语“列表值”指的是列表本身(它作为一个值,可以保存在变量中,或传递给函数,像所有其他值一样),而不是指列表值之内的那些值。列表看起来像这样:['cat', 'bat', 阅读全文
posted @ 2020-09-28 23:04 晓枫的春天 阅读(199) 评论(0) 推荐(0) 编辑
摘要: 下面我们看下 Python 里的函数 一、函数入门 先举个栗子尝尝鲜 def hello(): print('Howdy!') print('How are you!') print('Hi hi Hi ') hello() hello() hello() #输出结果 Howdy! How are 阅读全文
posted @ 2020-09-27 00:33 晓枫的春天 阅读(169) 评论(0) 推荐(0) 编辑
摘要: 学习了 Python 基本语法之后,下面学一下Python 里面的流程控制: 一、If 控制语句 注意事项:1、条件 后 + : 回车后自带退格书写代码块,这一点和 其它语言有点不一样,需要特别注意: 2、Python 里的 if 和 else 和其它语言基本一样,但是 elif 表示 分支的如果, 阅读全文
posted @ 2020-09-26 16:19 晓枫的春天 阅读(185) 评论(0) 推荐(0) 编辑
摘要: Python(蟒蛇)是一种跨平台的计算机程序设计语言。 是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。最初被设计用于编写自动化脚本(shell),随着版本的不断更新和语言新功能的添加,越多被用于独立的、大型项目的开发。 环境准备:https://www.python.org/ 下载 阅读全文
posted @ 2020-09-25 23:35 晓枫的春天 阅读(180) 评论(0) 推荐(0) 编辑
摘要: 前阵子 hive 接口机故障导致重装了系统,原先所有的配置信息焕然一新,主机系统装好后,发现和 数据库的连接失败了,也无法通过 sqluldr sqluldr2 和 Oracle 进行文件交互了,今天的任务就是 把这个环境整好,辛苦一天也算是完成任务,作为新手,记录一下,方便以后使用; 1、安装 O 阅读全文
posted @ 2020-09-25 22:49 晓枫的春天 阅读(3296) 评论(0) 推荐(0) 编辑
摘要: 之前已经搭好了 Mybatis 的学习环境,下面我们来做一下入门案例; 编写测试方法 @Test public void testMysatis() throws Exception{ //1、读取配置文件 InputStream inputStream = Resources.getResourc 阅读全文
posted @ 2020-08-24 21:18 晓枫的春天 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 1。1、什么是框架? framework 译为 框架 骨架 结构;在软件行业是整个系统或部分系统的可重用设计,表现为一组抽象构件和构件实例之间交互的方法;框架的另一种说法:框架是可被应用开发者定制的应用骨架,前者是从应用方面后者是从目的导向方面给出的定义;框架是软件行业的解决方案,不同的框架可以解决 阅读全文
posted @ 2020-08-21 00:00 晓枫的春天 阅读(156) 评论(0) 推荐(0) 编辑