摘要：
package com.util; import java.text.ParseException; import java.text.SimpleDateFormat; import java.util.Date; import java.util.Random; public class tes 阅读全文
摘要：
yum install ruby 默认安装ruby版本是2.0.0 有时需要，需要升级版本。那怎么做呢？ 1.安装 ruby yum install ruby 下面是升级步骤 2.不要删除ruby，继续执行以下命令： yum install centos-release-scl-rh yum ins 阅读全文
摘要：
问：现在有T1、T2、T3三个线程，你怎样保证T2在T1执行完后执行，T3在T2执行完后执行？ 答：要保证T1、T2、T3三个线程顺序执行，可以利用Thread类的join方法。 问：join方法的作用？ 答： Thread类中的join方法的主要作用就是同步，它可以使得线程之间的并行执行变为串行执 阅读全文
摘要：
Hive是数据仓库，主要用来对历史数据做分析 Hive 的产生是为了帮助非java程序员做MR分析 Hive是以hdfs为基础的，所有的数据存储在hdfs上，hive的所有操作都是hdfs和MR操作 Hive的搭建主要是mysql服务的配置信息，hdfs存储数据的路径 Hive分区是为了提高查询的效 阅读全文
摘要：
这种存储方式需要在本地运行一个mysql服务器 安装前，需先安装hadoop，jdk，和mysql。详见https://www.cnblogs.com/hzcjd/p/13669270.html 第一步：Liunx环境下安装mysql wget http://repo.mysql.com/mysql 阅读全文
摘要：
荐系统无处不在 比如： 购买成功后：购买了该商品的其他用户购买了以下商品 搜索成功后：您可能感兴趣的以下商品 主页或广告：您可能感兴趣的以下商品 如下图，用户A购买物品AC;用户B购买物品ABC;当用户C购买物品A后，根据数据分析发现，购买物品A的用户大多数购买了物品C,所以提醒用户C”购买了该商品 阅读全文
摘要：
Eclipse配置hadoop-eclipse-plugin 插件(win7) 简化操作，楼主准备了个带有hadoop插件的eclipse。见文章末尾 7.1环境变量新增 打开我的电脑—右键属性—高级系统设置—高级—环境变量，添加如下属性 HADOOP_HOME G:\tool\prodesign\ 阅读全文
摘要：
一. 环境 准备4台linux虚拟机搭服务,1台pc机 三. 高可用分布式集群安装HDFS 50070 3.0部署图 NN-1 NN-2 DN ZK ZKFC JNN IP地址 Node01 * * * 192.168.21.148 Node02 * * * * * 192.168.21.147 N 阅读全文
摘要：
一.安装环境与版本 Linux，虚拟机IP192.168.21.150: hadoop-3.2.0 jdk1.8 二. 伪分布式安装HDFS 2.1hosts与profile配置 cd /etc vim hosts 192.168.21.152 ha cd /etc vim profile expo 阅读全文
摘要：
Hadoop文件存储时将文件分为元数据，数据本身分别存储。 元数据指的是文件的属性信息，如存放位置，大小，创建时间等，NameNode节点保存文件元数据 数据本身指的是文件中的数据，数据分块Block存储可能是一块也可能是多块，这取决数据本身大小，DataNode节点保存文件Block数据 下图是h 阅读全文